UPDATE 12-sep-2021 9:00u: 

De leverancier heeft bug in de software gevonden, en is druk bezig voor deze bug een definitieve patch te maken. Ondertussen maken we gebruik van goed functionerende workaround

 

UPDATE 11-sep-2021 19:00u:

Inmiddels zijn bijna alle services weer online.

Dit geldt (nog) niet voor de testsites, die morgen z.s.m. worden hersteld.

-----------------------------------------------------------------------------------------------------------------------------

Hedenochtend hebben we ervaren dat er een automatische herstart is gedaan door onze loadbalancers.

Dit kan vaker voorkomen, maar zou dan binnen enkele minuten weer operationeel moeten zijn.

In dit geval bleek echter dat 1 van beide loadbalancers een corrupte config file had en juist deze is “de baas” geworden.

Gevolg:

Alle HCC Webservers achter onze HCC toegangspoort zijn niet of nauwelijks bereikbaar.

Oplossing:

Om dit probleem direct goed aan te pakken hebben vanuit Hobbynet contact gehad met de leverancier in het VK.

Advies is om direct te starten met een firmware upgrade en dan de config file opnieuw op te bouwen.

Dit betekent dat we iets langer “uit de lucht’ zijn, maar het dan ook in 1 keer oplossen.

Verwachting:

In de loop van de middag zullen alle HCC-servers weer bereikbaar zijn:

Er is dus niets verloren gegaan, maar het gaat hier enkel om de (niet onbelangrijke) toegang tot de sites.