Htforum.nl

Lees dit eerst => Over dit board (onderhoud/upgrades) => Topic started by: GPO on December 7, 2015, 11:06:05

Title: htforum server was down dit weekend?
Post by: GPO on December 7, 2015, 11:06:05
Ik kreeg dit weekend het niet voor elkaar om op de site te komen ("Firefox could not load this page"-achtige errors). Via verschillende devices geprobeerd (telefoon, laptop) en ook nog net hier via mijn werk PC lukte het niet, maar nu weer wel dus.

Wat was er allemaal aan de hand?
Title: Re: htforum server was down dit weekend?
Post by: Jumping Jack on December 7, 2015, 11:09:55
Niets, we waren hier gewoon erg hard over jou aan het roddelen en vonden het gepast om ons even af te zonderen...



;)
Title: Re: htforum server was down dit weekend?
Post by: VlisChris on December 7, 2015, 11:24:10
Volgens mij heeft Jeroen heel hard moeten werken :O

Bij mij en de anderen lag het forum er ruwweg een kleine dag uit.

We zijn terug. Fijn roddelen over GPO :devil:
Title: Re: htforum server was down dit weekend?
Post by: GPO on December 7, 2015, 11:25:36
Quote from: Jumping Jack on December  7, 2015, 11:09:55
Niets, we waren hier gewoon erg hard over jou aan het roddelen en vonden het gepast om ons even af te zonderen...



;)

HAHAHA. LOL.

O0
Title: Re: htforum server was down dit weekend?
Post by: riwi on December 7, 2015, 13:18:42
Wat was er aan de hand dan?
Was er een upgrade die niet goed is gegaan of ging er iets stuk?
Ik kreeg SMF cannot connect to the database meldingen dus dan doet de webserver het wel maar kan geen pagina's vinden/vullen uit de DB.
Title: Re: htforum server was down dit weekend?
Post by: Sjaak_Banaan on December 7, 2015, 13:23:26
Hier was het ook even paniek, ik vind het toch wel leuk om dagelijks even te lezen op dit forum. :)
Typisch dat ongeveer tegelijkertijd ook de website van ons werk kort offline ging en ik vandaag van een klant hoorde dat er op diverse plaatsen computerstoringen waren dit weekend. Geen idee wat er aan de hand is geweest....
Title: Re: htforum server was down dit weekend?
Post by: morca on December 7, 2015, 16:00:54
Ik mocht 1 dag zonder,wel apart nog nooit eerder zo gebeurd.
Title: Re: htforum server was down dit weekend?
Post by: buizesmurf on December 7, 2015, 16:14:44
Quote from: morca on December  7, 2015, 16:00:54
Ik mocht 1 dag zonder,wel apart nog nooit eerder zo gebeurd.

+1 hier belgenland
Title: Re: htforum server was down dit weekend?
Post by: Jeroen de Waal on December 7, 2015, 17:39:05
Kort gezegd.....een tmp directory op de server was volgelopen.


Jeroen.
Title: Re: htforum server was down dit weekend?
Post by: morca on December 7, 2015, 17:41:31
Hartelijk dank voor je tijd en moeite Jeroen  :worship:
Title: Re: htforum server was down dit weekend?
Post by: Nahpets on December 7, 2015, 17:50:51
Quote from: Jeroen de Waal on December  7, 2015, 17:39:05
Jeroen.
:pompom: :clapping: :thumbs-up: :headbanging:
Title: Re: htforum server was down dit weekend?
Post by: Staaled on December 7, 2015, 19:19:08
Thanks idd. :worship: :thumbs-up:
Title: Re: htforum server was down dit weekend?
Post by: SV..S on December 7, 2015, 19:25:41
Quote from: Nahpets on December  7, 2015, 17:50:51
:pompom: :clapping: :thumbs-up: :headbanging:
+1 en nog een beetje  O0 ;D :headbanging:
Title: Re: htforum server was down dit weekend?
Post by: Sk on December 7, 2015, 19:29:04
Quote from: Jeroen de Waal on December  7, 2015, 17:39:05
Kort gezegd.....een tmp directory op de server was volgelopen.


Jeroen.

Een vraag die we altijd van onze klant krijgen is: Hoe gaan jullie dit in de toekomst voorkomen?  ;D
Title: Re: htforum server was down dit weekend?
Post by: riwi on December 7, 2015, 19:52:08
Quote from: Jeroen de Waal on December  7, 2015, 17:39:05
Kort gezegd.....een tmp directory op de server was volgelopen.


Jeroen.

OK, niks ernstigs dus. Mooi. Opgelost weer :)   :coffee:
Title: Re: htforum server was down dit weekend?
Post by: RubenV. on December 7, 2015, 20:14:34
Quote from: Jeroen de Waal on December  7, 2015, 17:39:05
Kort gezegd.....een tmp directory op de server was volgelopen.


Jeroen.

Fijn dat je het weer werkend hebt gekregen Jeroen!  :pompom:
Title: Re: htforum server was down dit weekend?
Post by: abbcdcg on December 7, 2015, 20:34:46
Quote from: Sk on December  7, 2015, 19:29:04
Een vraag die we altijd van onze klant krijgen is: Hoe gaan jullie dit in de toekomst voorkomen?  ;D
Afhankelijk van wat je doet met de inhoud van /tmp een scriptje in een cron die de dir leeg maakt. Waarschijnlijk is hier geen rekening mee gehouden bij het opzetten van de server, en zijn hiervoor geen aparte partities aangemaakt waardoor het OS de grote bepaald.
Title: Re: htforum server was down dit weekend?
Post by: Sk on December 7, 2015, 21:25:51
Quote from: abbcdcg on December  7, 2015, 20:34:46
Afhankelijk van wat je doet met de inhoud van /tmp een scriptje in een cron die de dir leeg maakt. Waarschijnlijk is hier geen rekening mee gehouden bij het opzetten van de server, en zijn hiervoor geen aparte partities aangemaakt waardoor het OS de grote bepaald.

Ah oke! Kan Jeroen scripten?
Title: Re: htforum server was down dit weekend?
Post by: riwi on December 7, 2015, 22:03:12
Quote from: Sk on December  7, 2015, 21:25:51
Ah oke! Kan Jeroen scripten?
't is weer typische management speak die de techneuten willen voorzien van technisch advies. Laat die jongen gewoon doen wat ie doet.

Ga je een scriptje maken dat de /tmp monitor'd loopt er volgende maand een andere folder/partitie vol.

Zet dan servers dubbel of triple op met replicatie en een loadbalancer ervoor. Liefst georedundant. Richt een managed service organisatie in. Laat een team van goedkope india'ers de servers ieder uur handmatig controleren of straffe van lijfelijke consequenties.
Strakke contracten met duidelijke SLA en boete clausules.

En leg even een paar ton per jaar neer om dit te realiseren  :baaa:
Title: Re: htforum server was down dit weekend?
Post by: VlisChris on December 7, 2015, 22:21:51
:D

Gelukkig gaat het meestal dan ook gewoon goed ;)
Title: Re: htforum server was down dit weekend?
Post by: Erik on December 7, 2015, 22:31:50
Klasse Jeroen!
Title: Re: htforum server was down dit weekend?
Post by: edgnoj on December 7, 2015, 23:43:17
Jeroen, onze serverkampioen !!  :clapping:
Title: Re: htforum server was down dit weekend?
Post by: morca on December 7, 2015, 23:52:04
Server Service  ;D
Title: Re: htforum server was down dit weekend?
Post by: VlisChris on December 8, 2015, 00:24:23
Super Server Service ;D
Title: Re: htforum server was down dit weekend?
Post by: Kjelt on December 8, 2015, 07:30:01
Nu weten we tenminste weer wat we anders missen  ;)
Title: Re: htforum server was down dit weekend?
Post by: Jeroen de Waal on December 8, 2015, 08:41:00
Voorkomen kunnen we niet helemaal.
Dit was in ieder geval geen actie van buitenaf.


Jeroen.
Title: Re: htforum server was down dit weekend?
Post by: Sk on December 8, 2015, 09:39:42
Quote from: riwi on December  7, 2015, 22:03:12
't is weer typische management speak die de techneuten willen voorzien van technisch advies. Laat die jongen gewoon doen wat ie doet.

Ga je een scriptje maken dat de /tmp monitor'd loopt er volgende maand een andere folder/partitie vol.

Zet dan servers dubbel of triple op met replicatie en een loadbalancer ervoor. Liefst georedundant. Richt een managed service organisatie in. Laat een team van goedkope india'ers de servers ieder uur handmatig controleren of straffe van lijfelijke consequenties.
Strakke contracten met duidelijke SLA en boete clausules.

En leg even een paar ton per jaar neer om dit te realiseren  :baaa:

Zo was dit niet bedoeld Riwi. Ik gaf geen technisch advies maar vroeg alleen maar of hij kan scripten met het idee om er een definitieve oplossing voor te vinden. Laten we het zo dan is dat natuurlijk ook prima maar lopen we er over een tijd wellicht weer tegenaan. Ik probeer mee te denken :)
Je geeft aan dat er ook andere folder/partities kunnen vollopen. Welke zijn dit?

Je advies voor replicatie en loadbalancers is leuk maar het HTforum is geen onderdeel van een grote enterprise omgeving dus niet van toepassing. Ik kom zelf uit de techniek (beheer over zo'n 3000 servers) Als er b.v. een C schijf volloopt gaat er automatisch een script lopen die één en ander opruimt. Zo voorkom je dus dat servers unresponsive worden en gebruikers niet meer in kunnen loggen.
Title: Re: htforum server was down dit weekend?
Post by: riwi on December 8, 2015, 11:10:13
Quote from: Sk on December  8, 2015, 09:39:42
Je geeft aan dat er ook andere folder/partities kunnen vollopen. Welke zijn dit?

Je advies voor replicatie en loadbalancers is leuk maar het HTforum is geen onderdeel van een grote enterprise omgeving dus niet van toepassing. Ik kom zelf uit de techniek (beheer over zo'n 3000 servers) Als er b.v. een C schijf volloopt gaat er automatisch een script lopen die één en ander opruimt. Zo voorkom je dus dat servers unresponsive worden en gebruikers niet meer in kunnen loggen.

Er is van alles dat fout kan lopen op een server. Dus er is van alles wat je kan monitoren, diskspace, cpu  load, mem usage, temperaturen, disk health, fan status, hardware traps etc. Sommige alleen relevant voor fysieke hardware. Veel  software heeft ook een snmp interface naar een management systeeem voor alarmering voor als er iets mis is met de applicatie.  Het feit dat bv een /tmp vol loopt is een probleem van een applicatie die zijn tmp files niet opruimt. Gewoon files opruimen is dan een pleister pakken.

Mijn niet serieus te nemen commentaar was bedoeld om aan te geven dat je heel ver kan gaan maar dat dit niet nodig is voor het HTforum.
Title: Re: htforum server was down dit weekend?
Post by: Kjelt on December 8, 2015, 11:34:23
Zolang als het 1 dag per jaar ofzo is dan is er mijn inziens prima mee te leven.
Als iedere week er een dag uit zou vallen vanwege eenzelfde issue was het een ander verhaal.