Microsoftin palveluissa ilmeni maailmanlaajuisia häiriöitä torstaina 12. marraskuuta. Noin vuorokauden kestäneen ja laajamittaisia ongelmia viranomaispalveluissa, yrityksissä, kouluissa ja muissa organisaatioissa aiheuttaneen vian syy on sittemmin selvinnyt.
Vian taustalla ei ollut esimerkiksi kyberhyökkäys. Sen sijaan ongelman juurisyyhyn vaikutti kolme erillistä tekijää, joista yksi sai alkunsa jo heinäkuussa.
Kyseessä oli päivityksen virhe
Microsoft julkaisi kuukausia sitten Microsoft 365 -palvelua ylläpitäviin palvelimiin päivityksen. Päivityksen jakelu alkoi heinäkuussa, eikä ongelmia ilmennyt moniin kuukausiin.
Päivitys piti kuitenkin sisällään virheen Microsoftin työntekijöiden virheen. Ongelma alkoi paisua, kunnes palvelimet ylikuormittuivat ja lakkasivat toimimasta.
Microsoftin mukaan virhettä ei oltu alun perin huomattu, koska päivityksen testaamisessa ei oltu otettu huomioon suurten liikennemäärien vaikutuksia. Ongelma myös ilmeni erityisesti uudemmissa ja tehokkaammissa laitteistoissa, joita yhtiö ei käyttänyt testausvaiheessa.
Ongelmat laukesivat lopulta Microsoftin verkkoon kohdistuneen valtavan kuormituksen seurauksena. Noin 15 tuntia ennen käyttökatkon alkamista Microsoft Teams siirrettiin käyttämään Exchange Online -palvelua, jonka kautta myös Outlookin sähköpostit välitetään.
Jokainen ongelma olisi ollut yksinään ratkaistavissa helposti.
Palvelun siirto ei aiheuttaisi normaalisti ongelmia. Tässä tapauksessa Microsoftin palvelinkapasiteetista oli kuitenkin poissa käytöstä noin 14 prosenttia muista syistä.
Jokainen ongelma olisi ollut yksinään ratkaistavissa helposti. Kasvaneen kuormituksen ja palvelinkapasiteetin vähenemisen vuoksi taustalla jo kuukausien ajan piileskellyt ongelma kuitenkin iski toden teolla Microsoftin järjestelmiin.
Ongelmien kasaantuminen johti palvelujen kaatumiseen torstaina aikana, jolloin verkkoliikenne käy Yhdysvalloissa vilkkaimmillaan. Järjestelmä ohjaa liikenteen normaalisti toimiviin palvelimiin, mutta tällä kertaa myös ne ylikuormittuivat, mistä aiheutui ketjureaktio.
Vika päätyi kaatamaan palvelimia pitkin Microsoftin verkkoa vain kahdessa tunnissa. Yhtiön mukaan 80 prosenttia Microsoftin palvelimista ei pahimmillaan vastannut pyyntöihin.
Ongelman korjaaminen vei aikansa
Järjestelmä kaatui täysin liikennemäärän alla. Tämän seurauksena Microsoftin palvelut, kuten Outlook, Teams, Office ja Sharepoint lakkasivat toimimasta.
Ongelman korjaaminen vei aikansa. Palvelimet joutuivat heti suuren liikennemäärän kohteeksi ja menivät uudelleen pois päältä, kun ne siirrettiin takaisin verkkoon.
Korjaustoimia viivästytti se, että vian taustalla ollut ohjelmistovirhe oli ollut olemassa jo kuukausien ajan. Järjestelmää ei voitu vain palauttaa aiempaan tilaan.
Lähde: Independent
Voit lisätä Staran Googlen ensisijaiseksi lähteeksi klikkaamalla tästä ja ruksittamalla laatikon. Voit myös lukea lisää tähän artikkeliin liittyvistä teemoista ja aiheista, kuten Microsoft tai laajemmin samasta aihealueesta Digi -osioistamme.