A2020D04: Verstoring appcluster 27 oktober 2020

Beste klant/collega,

(Is dit bericht niet goed leesbaar? Bekijk dan de online versie.)

Op 27 oktober 2020, tussen 9:10 en 10:00 is er een verstoring geweest in het appcluster. Op één van de nodes heeft een instantie een bug getriggered waardoor deze node in de problemen is gekomen. Andere instanties die op deze node draaiden raakten hierdoor ook onbereikbaar.

Op het moment dat het duidelijk werd dat de node gereboot moest worden om het probleem op te lossen, is besloten de instanties op te brenden op een stand-by node. De oorspronkelijke node zal worden gereboot en op een later moment weer in gebruik genomen worden. Het in gebruik nemen betekent dat een aantal instanties zullen worden verhuisd van de standby node, naar de oorspronkelijke node. Wanneer dat uitgevoerd wordt en welke instanties dit betreft, zullen we communiceren.

Onder de getroffen instanties waren ook een aantal instanties verantwoordelijk voor POMS, waardoor dus ook POMS is getroffen. Tijdens de verstoring bleek dat een aantal websites dusdandig afhankelijk zijn van POMS, waardoor deze websites ook niet meer bereikbaar waren. Dit terwijl de instanties van de betreffende sites niet op de getroffen node draaiden.

We hopen je op deze manier voldoende geinformeerd te hebben,

het NPO Hosting team.