C2023D04: On-Prem Storage Onderhoud
Aankondiging: On-Prem Storage onderhoud hosting omgeving
Beste klant/collega,
(Is dit bericht niet goed leesbaar? Bekijk dan de online versie.)
Wij vragen aandacht voor het volgende:
-
On-Prem storage onderhoud
On-Prem Storage onderhoud
Op woensdag 17 april overdag en in de nacht van 17 op 18 april wordt er onderhoud gepleegd aan de on-prem NPO hosting storage omgeving.
Alle webhosting die draait op CHP ondervindt geen impact van dit onderhoud. De impact beperkt zich tot een aantal on-prem omgevingen, waaronder het web-interface van ARLA.
Wat gaan we doen
Er worden firmware upgrades van de NAS omgevingen uitgevoerd. Het schema ziet er als volgt uit:
| datum | tijd | wat | impact |
|---|---|---|---|
| woensdag 17 april | 13:00–15:00 | mediastorage NAS | geen impact verwacht |
| nacht van 17 op 18 april | 1:00–3:00 | hostingstorage NAS | lichte impact verwacht |
Aanleiding/ achtergrond
Een onderdeel van de on-prem NPO storage omgeving zijn een viertal NAS1) systemen. Deze leveren file storage aan de interne NPO organisatie en ook aan de on-prem hosting omgeving.
Voor deze NAS systemen geldt dat deze ingebakken software hebben (zogeheten “firmware”) en die firmware moet van tijd tot tijd bijgewerkt worden naar een nieuwere versie waarin bugs opgelost zijn. In deze ronde worden de NAS systemen van een jaarlijkse upgrade voorzien.
Impact
De 4 NAS systemen zijn verdeeld over 2 clusters; 1 voor mediastorage en 1 voor hosting storage, elk bestaand uit 2 nodes. Een firmware upgrade gebeurt voor node. Tijdens de upgrade van de ene node wordt de gehele workload tijdelijk even door de andere node gedaan, waarna de workload weer eerlijk over beide nodes verdeeld wordt. Het omschakelen van workload tussen de nodes duurt ongeveer 10 seconden tot een minuut. Tijdens zo'n omschakeling staat het ophalen en wegschrijven van bestanden even stil. In geval van websites en apps kan dat betekenen dat deze tijdelijk een timeout geven. Omdat er gedurende de nacht meerdere van dit soort overschakelmomenten nodig zijn kunnen dit soort timeouts een aantal malen gedurende de nacht plaatsvinden.
De mediastorage NAS doet bijna niets meer, want de meeste content wordt via een ander CDN wordt uitgespeeld. De rest-content die bv nog via content.omroep.nl wordt uitgespeeld bevindt zich grotendeels in lokale on-disk caches van de uitspeelservers, waardoor de upgrade van de mediastorage NAS zonder impact kan gebeuren.
Bereikbaarheid
Team Hosting&Streaming is gedurende het onderhoud via de normale kanalen bereikbaar. Zie de contact pagina