31 augustus: Storing bij Microsoft: het risico van afhankelijkheid van één leverancier

Wanneer de kern van de cloudinfrastructuur uitvalt, komen de activiteiten van moderne bedrijven tot stilstand. Op maandag 31 augustus werden duizenden organisaties wereldwijd op pijnlijke wijze geconfronteerd met hun digitale afhankelijkheid, toen Microsoft Outlook en het bredere Microsoft 365-ecosysteem te maken kregen met een dienstonderbreking die meerdere uren duurde.

Verantwoordelijken voor bedrijfscontinuïteit kennen dit risicoscenario: wanneer een organisatie voor haar belangrijkste operationele tools volledig afhankelijk is van één leverancier, loopt zij het risico op een ‘single point of failure’.

Wanneer een primaire cloudprovider het laat afweten, is er een onmiddellijk, onafhankelijk alternatief nodig om de productiviteit van het personeel op peil te houden. Om het risico van afhankelijkheid van één leverancier te beperken, kunt u kiezen voor een bedrijfscontinuïteitsstrategie op locatie of een strategie voor bedrijfscontinuïteit over verschillende cloudomgevingen heen. 

De storing begon maandagochtend vroeg, waardoor het aantal meldingen van storingen op telemetrieplatforms zoals Downdetector sterk toenam. Wat aanvankelijk leek op een gewoon verbindingsprobleem bij klanten, escaleerde al snel tot een grootschalig infrastructuurincident.

• Belangrijkste symptomen die hierdoor worden beïnvloed: Gebruikers bij alle getroffen tenants konden de Outlook-desktopapp niet starten of het webportaal niet openen. Organisaties meldden ernstige knelpunten in de e-mailstroom, volledige storingen bij het verzenden of ontvangen van berichten, inlog- en authenticatiefouten, en defecte zoekfuncties voor mailboxen.

• Toepassing in de hele Microsoft 365-suite: Hoewel Outlook en Exchange Online de meest zichtbare storingspunten waren, heeft Microsoft in de incidentrapporten MO1465074 / EX1464935 erkend dat het onderliggende probleem ook de werking van aanverwante zakelijke tools heeft verstoord. De gevolgen waren merkbaar voor Microsoft Teams, OneDrive for Business, SharePoint Online, Microsoft Purview en Microsoft Defender XDR.

• Wereldwijd bereik en ongelijke gevolgen: Het incident kwam rond 17.30 uur UTC in de openbaarheid en had een groot geografisch bereik. In Amerika werden grote verstoringen gemeld in meerdere staten van de VS (waaronder Texas, New York, Kentucky en Nevada), naast meldingen uit Latijns-Amerika. Aan de Pacifische kust waren de gevolgen al aan het begin van de werkdag merkbaar (wat een manier om de maandag te beginnen!). Europese ondernemingen kregen aan het einde van de werkdag te maken met ernstige authenticatiefouten en storingen in de berichtbezorging, waardoor cruciale afsluitingsprocedures aan het einde van de maand op 31 augustus werden verstoord. De gevolgen waren ongelijk: terwijl sommige medewerkers toegang behielden, werden collega’s op exact dezelfde tenant volledig buitengesloten.

• Een duur van meer dan 10 uur: Het incident duurde bijna 11 uur voordat de telemetrie weer stabiel was. Door deze langdurige periode hadden de IT-teams moeite om de basiscommunicatie, zowel intern als met klanten, in stand te houden.

• Oorzaak en oplossing: Microsoft heeft vastgesteld dat de storing te wijten was aan een verkeerde configuratie in een cruciaal authenticatiecomponent en in de protocolverbindingslaag die door de interne Exchange Online-diensten worden gebruikt. Technici hebben hierop gereageerd door een gerichte patch te implementeren om de authenticatieconfiguraties te resetten, waarbij de updates stapsgewijs over de serverinfrastructuur werden uitgerold.

Wanneer zich een incident zoals MO1465074 / EX1464935 voordoet, kunnen de primaire e-mail, de interne chat, de bestandsopslag en de beveiligingsdashboards tegelijkertijd uitvallen. In dergelijke scenario’s zijn traditionele rampherstelplannen die steunen op secundaire tools binnen de hetzelfde het cloud-ecosysteem faalt.

Als Microsoft Teams uw back-upcommunicatieplan is, maar Teams gebruikmaakt van dezelfde basisinfrastructuur voor identiteitsbeheer en authenticatie als Exchange Online, dan valt uw noodoplossing samen met uw primaire systeem uit. Echte veerkracht vereist structurele diversiteit in leveranciers.