Microsoft 365-storing: ook Intune en Exchange plat
Microsoft 365 is sinds donderdagavond wereldwijd slecht bereikbaar. De storing raakt uitgerekend ook de portals waarmee een beheerder zoiets normaal uitzoekt. Microsoft bevestigt het probleem in het Microsoft 365-beheercentrum onder incidentnummer MO1550821.
Wat er uitligt
Volgens die melding kunnen klanten geen verbinding maken met Exchange Online, Microsoft Teams, SharePoint Online, Microsoft 365 Copilot en Microsoft Defender XDR. BleepingComputer las de advisory en meldt dat Microsoft het begin van het incident op donderdag 13.26 uur ET zet, oftewel rond half acht 's avonds Nederlandse tijd. Microsoft begon de dag overigens al met een los Teams-incident, TM1550488, dat van 9.45 tot 10.53 uur ET duurde en volgens het bedrijf volledig is opgelost. Of de twee incidenten met elkaar te maken hebben, heeft Microsoft niet gezegd.
The Register wijst op het pijnlijke deel voor beheerders: ook Intune en het Microsoft 365 Apps Admin Center gingen onderuit. Wie wilde uitzoeken wat er aan de hand was, kon dus niet bij zijn eigen gereedschap.
Het raakt niet alleen zakelijke tenants. Volgens Tweakers gelden de problemen voor zowel de zakelijke als de consumentenvariant, met klachten over Outlook en OneDrive, en meldden ook Nederlandse gebruikers de storing op Allestoringen.nl.
Niet meer verkeer, maar minder servers
Microsoft dacht eerst aan een verhoogde belasting op de infrastructuur, maar stelde dat beeld bij. "We determined the elevated load isn't driven by an increase in traffic, but by a number of servers being unexpectedly unavailable; straining the remaining infrastructure", schreef het bedrijf. Niet meer vraag dus, maar minder aanbod: een deel van de servers viel weg en de rest liep daardoor vol.
In het beheercentrum werd Microsoft specifieker over het mechanisme. De getroffen servers zakken door een geautomatiseerde health check en worden daardoor als onbeschikbaar gemarkeerd, en dat kan volgens het bedrijf te maken hebben met een recente wijziging aan juist de component die die checks verwerkt. Later kwam daar bij dat een kernproces op de getroffen servers overbelast raakt, waardoor ze niet meer reageren.
Herstel dat niet blijft plakken
Microsoft heeft alle deployments stilgezet, verkeer over zijn wereldwijde infrastructuur herverdeeld en begon de getroffen servers te herstarten. Dat werkte maar deels. Het bedrijf vond een alternatieve methode om de servicegezondheid te controleren, waarmee een deel van de servers terugkwam, en keek of het terugdraaien van een klein aantal recente configuratiewijzigingen het herstel kon versnellen.
Het hardnekkige punt staat in de laatste update die The Register om 00.35 uur UTC vrijdag toevoegde: herstelde servers blijven aanvankelijk gezond, maar kunnen opnieuw vastlopen zodra ze verkeer gaan krijgen. Microsoft analyseerde op dat moment met zijn netwerk- en platformspecialisten waardoor dat gebeurt. Een tijdlijn voor volledig herstel heeft het bedrijf niet gegeven.
Wat je nu kunt doen
- Volg MO1550821 in Service health in het Microsoft 365-beheercentrum. Houd er rekening mee dat het beheercentrum zelf tijdens dit incident niet altijd bereikbaar was.
- Verwacht geen harde omslag maar een geleidelijk herstel: Microsoft waarschuwt expliciet dat gebruikers het stap voor stap terug zien komen zodra hun applicaties opnieuw verbinding maken.
- Microsoft heeft zijn deployments gepauzeerd. Eigen wijzigingen aan de getroffen diensten uitstellen tot het incident gesloten is, voorkomt dat je straks je eigen werk als oorzaak moet uitsluiten.