Microsoft je priopćio da se dio poslužitelja vraća u pogon i da je pokrenut pojednostavljeni proces oporavka nakon globalnog ispada usluga Microsoft 365. Prema podacima tvrtke, gotovo 130.000 korisnika diljem svijeta prijavilo je poteškoće s pristupom softverskom paketu, uključujući Outlook i Teams.
Na web-stranici za praćenje ispada Down Detector zabilježen je nagli porast prijava problema s Microsoftom 365. Gotovo 130.000 prijava odnosilo se na otežan pristup aplikacijama Word, Excel, PowerPoint, Outlook i Teams. Poteškoće su zabilježene i u poslovnim uslugama poput SharePointa i OneDrivea, a bio je zahvaćen i AI asistent Copilot. Mnogi korisnici naveli su da nisu mogli slati ni primati e-poštu ili da su imali problema s učitavanjem sandučića. Novije prijave od tog vrhunca su se smanjile.
Microsoft je na društvenoj mreži X objavio da istražuje izvješća korisnika koji su imali poteškoće s pristupom Exchange Online poštanskim sandučićima putem više načina povezivanja. Tvrtka je objasnila da je dio njezine infrastrukture bio pod povećanim opterećenjem, što je vjerojatno pridonijelo pogreškama u povezivanju. Utvrđeno je i da je određeni broj poslužitelja neočekivano postao nedostupan zbog problema koji je uzrokovao njihov pad tijekom automatiziranih provjera.
Microsoft je priopćio da je potvrdio alternativnu metodu provjere zdravlja na podskupu zahvaćenih poslužitelja, što im je omogućilo uspješan povratak u pogon. Tvrtka je navela da se taj popravak primjenjuje šire te da priprema automatizirani proces za otkrivanje i ponovno pokretanje poslužitelja koji ne reagiraju. Pregledom nedavnih promjena identificirane su konfiguracijske nadogradnje kao mogući uzrok problema, no istraga je još bila u tijeku.
Microsoft je izvijestio da radi na ponovnom pokretanju i validaciji zahvaćenih poslužitelja te da nastoji ubrzati proces. Tvrtka je razmatrala bi li vraćanje malog broja nedavnih konfiguracijskih nadogradnji moglo ubrzati oporavak. Nastavila je tražiti sve dostupne načine za obnovu usluge jer dotad poduzete radnje nisu dale očekivano olakšanje. Utvrđeno je da se ključni proces na zahvaćenim poslužiteljima preopterećuje, zbog čega poslužitelji prestaju reagirati.
Microsoft je potom priopćio da se dio zahvaćenih poslužitelja počeo vraćati u pogon i da su ostali stabilni. Tvrtka je preusmjerila promet i veze na alternativne putove gdje je to bilo moguće te je uočila ograničen oporavak u nekim regijama. Proces oporavka je pojednostavljen kako bi se preostali zahvaćeni poslužitelji što brže vratili u službu. Uvedeno je i zaštitno upravljanje prometom radi smanjenja opterećenja zahvaćenih poslužitelja. Microsoft je upozorio da korisnici mogu očekivati postupni oporavak dok se ponovno povezuju na usluge 365.
Ranije upozorenje o degradaciji usluge na Microsoftovim stranicama navelo je da tvrtka agresivno traži sve načine za smanjenje utjecaja te da ponovno pokreće zahvaćene poslužitelje kako bi ih vratila u pogon. Kao mjeru predostrožnosti Microsoft je pauzirao sve implementacije i konfiguracijske promjene dok je pregledavao nedavne izmjene ne bi li pronašao korelaciju s ovim događajem. Utvrđeno je da povećano opterećenje nije bilo uzrokovano ukupnim porastom prometa, već velikim brojem poslužitelja koji su neočekivano postali nedostupni, što je preusmjerilo opterećenje na preostalu infrastrukturu. Microsoft je istraživao što uzrokuje nedostupnost poslužitelja dok je radio na njihovom sigurnom vraćanju u službu.
Mark Gregory, izvanredni profesor na Školi inženjerstva Sveučilišta RMIT, ocijenio je da ispad pogađa mrežni sloj u Microsoftovim sustavima. Prema njegovim riječima, ispad je potencijalno sličan konfiguracijskom problemu koji je 2023. oborio Optusovu mrežu. Gregory je objasnio da kada neki poslužitelji imaju konfiguracijske probleme, korisnici su prisiljeni dijeliti manji broj poslužitelja za pristup cloud uslugama. Gubitak dijela poslužitelja znači da svi korisnici pokušavaju pristupiti preostalima, preopterećujući ih i uzrokujući njihov pad, što dovodi do kaskadnog problema. Dodao je da je potrebno vrijeme da se pronađe temeljni problem, u ovom slučaju pogrešna konfiguracija u mrežnom sloju. Tvrtke bi, smatra, trebale više ulagati u testna okruženja za konfiguracijske promjene prije implementacije u živu mrežu. Poduzeća koja ovise o cloud uslugama poput Microsofta 365 trebala bi imati rezervne opcije, rekao je Gregory. Iz globalne perspektive, netko negdje je bio ozbiljno pogođen i na kraju dolazi do gubitka produktivnosti, istaknuo je. Mnogi ljudi, dodao je, drže Gmail račun pa ako im Microsoft padne koriste Gmail, a ako Gmail padne koriste Microsoft.
OpenAI i Anthropic izvijestili su da je problem utjecao na Microsoft 365 konektor koji povezuje ChatGPT i Claude AI s Microsoftovim uslugama. Ranije je Microsoft priopćio da je uspješno otklonio probleme povezane s Microsoft Teamsom u Sjevernoj Americi.
