NPO Hosting en Streaming

This page is read only. You can view the source, but not change it. Ask your administrator if you think this is wrong.
~~META:
title = C2023M04: OpenShift Storage vervangen OSD pods
~~
{{htmlmetatags>
metatag-keywords=(Openshift Storage vervangen OSD pods)
metatag-og:title=(Openshift Storage vervangen OSD pods)
metatag-og:description=(
    In de nacht van woensdag 29 op donderdag 30 maart 2023 zullen we een drietal OSD pods vervangen in het OpenShift Storage project.
)
}}
===== C2023M04: OpenShift Storage vervangen OSD pods  =====
Beste klant/collega,

Op donderdag 30 maart tussen 01:00 en 05:00 zullen we een aantal OSD pods vervangen in de storage van OpenShift.

Deze OSDs maken momenteel gebruik van een verouderde configuratie. Deze configuratie zorgde voor uitval in het storage cluster tijdens de upgrades van januari en februari. In de meer recentere updates hebben we handmatige acties moeten uitvoeren om onbeschikbaarheid en onderbrekingen van de storage te voorkomen. We willen dit handwerk bij toekomstige upgrades voorkomen en kiezen daarom voor het vervangen van de OSDs die onder deze oude configuratie draaien.

====Duur werkzaamheden====
In totaal gaat het om de vervanging van 3 OSD pods (in totaal draaien we er 12). Deze pods zijn elk goed voor het bewaren van 1.1 TiB aan data. Deze data is redundant opgeslagen.
 
Zodra we 1 OSD pod vervangen, zal deze 1.1TiB opnieuw moeten worden verdeeld over de overige OSDs. Dit kan aardig wat tijd in beslag nemen en hangt af van de snelheid waarmee Placement Groups opnieuw worden gebalanceerd. We gaan ervan uit dat we 1 OSD binnen het onderhoudsvenster kunnen ontvangen. Als blijkt dat er ruimte is voor een extra vervanging, zullen we deze meenemen.

====Mogelijke impact====
De storage zal ook tijdens de werkzaamheden gewoon beschikbaar blijven. Tijdens het opnieuw verdelen van de data over het cluster kan de latency iets toenemen. Dit is mogelijk merkbaar voor afnemers die gebruik maken van het storage cluster in CHP voor het bewaren van data.

====Risico====
Laag. We hebben de vervanging van de OSD pods in nauwe samenwerking met Red Hat voorbereid. De werkzaamheden zijn zonder problemen getest in een sandbox cluster met configuratie gelijk aan productie.

====Mitigerende maatregelen====
We maken voor de migratie een backup van etcd. Red Hat zal standby zijn om ons bij te staan bij onvoorziene gebeurtenissen.

====Communicatie====
We zullen na afloop van de change laten weten of de werkzaamheden volledig konden worden afgerond. Mogelijk volgt er een vervolgactie om de OSD pods die niet aan de beurt zijn gekomen te vervangen in het daarvoor beschikbare tijdvak.

Neem bij vragen of opmerkingen contact op via de reguliere kanalen:https://hosting.omroep.nl/contact.