Alt om kæmpe-nedbruddet hos Microsoft

Efter næsten et døgn med massive problemer ser Microsofts tjenester ud til at være på vej tilbage.

Danske virksomheder begyndte omkring middag igen at modtage mails i Outlook, og Microsoft meldte klokken 13.32 om markante fremskridt i Europa og USA.

Nedbruddet begyndte torsdag eftermiddag og har ramt brugere i mindst 74 lande. Især Outlook og Exchange har været hårdt ramt, men problemerne har også bredt sig til andre Microsoft 365-tjenester.

Enkelte brugere kan fortsat opleve problemer.

Microsoft har endnu ikke fastslået årsagen, men oplyser, at der ikke er tegn på et cyberangreb. Den samme konklusion er sikkerhedsekspert Peter Kruse kommet frem til. 

Selskabet har lovet en detaljeret redegørelse, når driften er fuldt genoprettet.

Læs med her - eller nedenfor - hvordan nedbruddet har forløbet i dag

En kædereaktion udløst af ændringer i Microsofts infrastruktur kan være forklaringen på det omfattende nedbrud, der siden torsdag har ramt Microsoft 365 verden over.

Det vurderer den mangeårige danske it-sikkerhedsekspert Peter Kruse, som har gennemgået Microsofts oplysninger om hændelsen.

Ifølge Kruse begyndte problemerne tilsyneladende med ændringer i centrale tjenester, herunder Exchange, som fik Microsoft til at forsøge at rulle ændringerne tilbage.

Hans teori er, at problemerne med Exchange efterfølgende har udløst en kædereaktion.

"Når en central tjeneste som Exchange går offline, og så igen går online, vil samtlige klienter forsøge at reetablere forbindelsen, og det er formentlig hvad Microsoft så kalder: overbelastning," skriver han på LinkedIn.

Dermed kan forsøgene på at genoprette driften have været med til at forværre problemerne.

Kruse understreger, at analysen står for egen regning, og at han ikke ser tegn på et cyberangreb.

Microsoft har endnu ikke fastslået den endelige årsag til nedbruddet, men har lovet at offentliggøre en detaljeret rapport, når problemerne er løst.

Læs også: Microsoft: Vi vil fortælle alt, når Microsoft 365 er på benene igen

Microsoft 365 er ved at være oppe at køre igen i Europe, meddeler Microsoft i en ny statusopdatering.

"Vi ser opmuntrende fremskridt i Europa, hvor tilgængelighed og email-levering bliver bedre og bedre påm tvæs af et stigende antal ramte Microsoft 365-installationer," lyder det fra selskabet.

Også USA er ved at være stablet på benene igen, mens Japan ifølge Microsoft nu er meget mere stabil end både Europa og USA.

"Vi fokuserer nu på at adressere de områder, der fortsat er ramt af forstyrrelser samt på at forbedre stabiliteten på tværs af de ramte regioner," meddeler Microsoft i den nye opdatering.

Efter have været i sort siden torsdag eftermiddag, begynder danske virksomheder nu igen at kunne komme i kontakt med deres Outlook, og mails er igen begyndt at strømme ind i danskernes mail-bokse.

Stille og roligt kommer den ene Microsoft 365-installation efter den anden på benene igen.

Det gælder også Computerworlds egen installation, der midt under frokosten ved 11:40-tiden pludselig kom til live, så de mails, der i timevis havde ligget i systemet og ventet på at kunne komme til, pingede ind i en lang række, mens send-bakkerne blev tømt.

Microsoft meddeler, at genopretningen af Microsoft 365 stadig pågår og skrider fremad skridt for skridt i takt med, at teknikere får aktiveret de ramte servere i Microsoft 365-infrastrukturen.

Microsoft ser nu 'begyndende tegn' på stabilisering af selskabets infrastruktur efter det langvarige nedbrud af Outlook, meddeler selskabet i en helt ny statusopdatering udsendt cirka 10:15 dansk tid.

"Kapaciteten er endnu ikke på normalt niveau og stabiliteten varierer i takt med, at trafikken forsigtigt genindføres," meddeler Microsoft.

Problemerne betyder, at selskabet nu udvider den såkaldte time out-periode til 48 timer. 

Det betyder, at de mails, som brugerne enten har sendt eller fået tilsendt under nedbruddet, vil blive sendt, når systermene er oppe at køre igen. Du behøver altså ikke sende dem igen.

Udvidelsen af time out sker for 'for at hjælpe med at beskytte forsinkede beskeder, mens genopretningen af tjenesten fortsætter," som det lyder fra Microsoft.

Selskabets teknikere har lige nu fokus på backlog og kø-dannelser i systemet.teknol

Mens millioner af medarbejdere verden over venter på at få adgang til Outlook igen, har galgenhumoren indfundet sig på danske LinkedIn.

For e-mail er stadig det moderne kontors puls, og når den forsvinder, bliver arbejdsdagen pludselig noget anderledes.

"I dag får vi alle sammen lige en gratis beredskabstest af Microsoft. Tillykke med det," skriver Peter Erikstrup fra Resilience Partners.

Han gennemgår derefter, hvad der stadig virker i Microsofts systemer, inden han slutter med et råd.

"Og hvis alt andet fejler, så drik en kaffe med din kollega, og hop tidligt i fredagsbaren."

Rasmus Grinderslev fra Tryg Invest foreslår ligefrem, at nedbruddet bliver en årlig begivenhed.

"Jeg støtter Microsofts nye initiativ med en global Outlook-er-nede-dag. Jeg håber, vi kan fejre den hvert år," skriver han med en opfordring til Microsoft om at varsle dagen på forhånd.

"Hav en velsignet dag. Og respekter venligst virksomhedernes privatliv i disse svære tider."

De problemer, som mange danskere lige nu oplever på grund af det store Outlook-nedbrud, understreger en gang for alle, hvorfor det er så vigtigt, at vi får nogle flere datacentre.

Sådan lyder det fra flere borgerlige politikere, der på LinkedIn benytter sig af anledningen til at lange ud efter modstandere af datacentre på dansk jord.

Her har en række kommuner efter borgerprotester eksempelvis udskudt planer om at give grønt lyst til datacentre i deres lokalområder.

"En lille forsmag på venstrefløjens liv uden datacentre. Gad vide om nogen bruger det dersens "email" til noget produktivt," skriver Liberal Alliances Steffen W. Frølund, der sidder i EU-Parlamentet.

Folketingsmedlem for Venstre, Anders Storgaard, er på samme linie.

"Hvad skal vi overhovedet bruge datacentrene til? Det kan vi jo bruge tiden på at reflektere over i dag, hvor mange ikke kan sende mails, fordi Outlook, Teams, Copilot og andre Microsoft-tjenester er nede. Velkommen til hverdagen, hvis maskinstormer ideologien vinder frem. Uden data kan vi ikke sende mails. Se nyheder. Bruge sociale medier. Eller drive de fleste af vores virksomheder eller offentlige tjenester," skriver Anders Storgaard.

Mens Microsofts store nedbrud har ramt brugere verden over, ser Danmarks centrale offentlige it-systemer ud til at være sluppet for problemerne.

Ifølge Digitaliseringsstyrelsens driftsoversigt fungerer både MitID, Digital Post, borger.dk, sundhed.dk, NemKonto og virk.dk uden driftsforstyrrelser.

Oplysningerne er senest opdateret fredag klokken 08.00.

Også hos Økonomistyrelsen er der normal drift på blandt andet Statens Lønløsning, Navision Stat og Statens HR.

Hos KOMBIT, der står bag en række fælleskommunale it-løsninger, kører de centrale systemer også videre.

Dog oplyser KOMBIT, at der er problemer med at sende mails til supporten på grund af driftsproblemer hos en tredjepart. Det fremgår ikke, om problemerne skyldes Microsofts nedbrud, men mon ikke mail-problemerne kommer derfra.

Microsofts omfattende problemer har især ramt Microsoft 365 og de kontor- og samarbejdsværktøjer, som virksomheder og myndigheder anvender i det daglige.

Læs også: Disse 19 store Microsoft-løsninger er ramt af nedbruddet

Virksomheder i hele Danmark er ramt af det store nedbrud af Microsoft 365 og Outlook.

Den tætteste koncentration af virksomheder finder vi i de store byer som København, Aarhus, Aalborg og Odense, viser ny oversigt fra Downdetector.

Her er der også registreret en stor koncentration af ramte brugere i byer som Roskilde, Ringsted og Slagelse.

Der rapporteres ifølge Downdetector især om problemer med app og login.

LinkedIn - som Microsoft jo også står bag - flyder lige nu samtidig nærmest over med meldinger fra danske virksomheder fra hele landet med beskeder om, at de ikke kan kontaktes via mail, da de ikke kan få forbindelse til Outlook.

Ikke mindst sælgere opfordrer til, at man på god gammeldags vis telefonerer, hvis man har ordrer, som det haster med at få igennem. Det gælder også, hvis man har sendt mails til dem inden for det seneste døgns tid.

Microsoft har installeret en opdatering i sine datacentre, meddeler selskabet i en statusopdatering udsendt for nogle minutter siden.

Indtil videre tyder det på, at opdateringen giver 'positive resultater' i forhold til serverens stabilitet, meddeler selskabet.

Opdateringen er blevet installeret i den del af Microsofts infrastruktur, der anvendes til at autentificere trafikken ud af datacentrene i det, som Microsoft kalder for en 'routing component.'

"Vi overvåger fortsat fremskridtene og er i gang med at udvide opdateringen til servere for at sikre, at aktive regioner igen kan komme online," lyder det i den dugfriske opdatering.

De seneste måneder er hackerangreb skyllet ind over Danmark.

DTU og Københavns Universitet har fået stjålet personoplysninger. Mærsk har haft ubudne gæster i sine it-systemer. Og hackere har angrebet køleanlæg i europæiske supermarkeder med styringer fra blandt andre Danfoss.

Angrebene har udstillet vores digitale sårbarhed og vist, hvor store konsekvenserne kan være.

Men fredagens massive Microsoft-nedbrud udstiller en anden og mindst lige så alvorlig sårbarhed.

Vores enorme afhængighed af én enkelt leverandør - for Danmark er først og fremmest et it-land domineret af Microsoft-løsninger.

Når Microsoft får problemer, rammes virksomheder, myndigheder og millioner af medarbejdere verden over. Pludselig kan vi hverken læse mails, bruge kalenderen eller få adgang til centrale arbejdsredskaber.

Vi har gennem årtier lagt en stadig større del af vores digitale hverdag i hænderne på Microsoft.

Det har gjort arbejdet lettere og mere effektivt.

Men det har også skabt en afhængighed, som vi i dag får demonstreret konsekvenserne af.

Microsoft Danmark vil ikke sige noget til Computerworld om det store nedbrud, der har ramt mange danske Microsoft-brugere.

Microsoft Danmarks kommunikationsdirektør, Morten Skøtt, svarer kort til Computerworld, at han henviser til en statusopdatering på X fra Microsofts øverste chef for Copilot og platforme, Charles Lamanna.

Her skriver Lamanna, at han "beklager' de forstyrrelser, som Microsofts kunder har oplevet, og at Microsoft vil 'dele mere information,' når selskabet har den.

Han skriver også (som vi allerede har skrevet), at der indtil videre ikke er noget, der tyder på, at nedbruddet skyldes et cyberangreb.

Tjenesten Downdetector, som via brugerinput holder øje med både hjemmeside og online-tjenesters oppetid - eller oftest: nedetid - har også fulgt med i Microsoft-nedbruddet. 

Downdetector er især god til hurtigt at opdage tegn på omfattende driftsproblemer, ofte før virksomhederne selv melder noget officielt ud.

Ifølge Downdetector var der oprindelig flere udfald mellem 18:30 og 00:00 torsdag, men det er især fra kl. 06 fredag morgen at tjenestens brugere for alvor kunne mærke udfaldet. 

Microsoft er i gang med at forsøge at genstarte de servere, der torsdag gik ned og forårsagede kæmpe-problemer over hele verden.

"På nuværende tidspunkt har vi observeret begrænset fremgang. Derfor er vi gået i gang med at udvide kapaciteten med virtuelle maskiner," meddeler Microsoft i en statusopdatering.

Selskabet meddeler, at det fortsat er i gang med at få overblik over situationen i de forskellige datacenter-regioner, der er ramt.

"Det omfatter gennemgang af serverydeevnen samt bekræftelse af, at de udviklede rettelser (patches) er blevet implementeret, og at de fungerer efter hensigten," meddeler Microsoft.

Det store nedbrud har ramt disse tjenester, som har problemer: 

- Exchange Online: Ingen adgang til Outlook, Exchange ActiveSync og REST-connections.

- Teams - dog kun kalender, møder og interaktioner med Outlook. De fleste af grundfunktionerne fungerer.

- Power BI.

- SharePoint Online.

- Windows 365.

- Universal Print.

- Microsoft 365 Admin Center.

- Alle Microsoft 365-apps.

- Microsoft 365 Apps Admin Center - herunder Cloud Update, Cloud Policy og Inventory

- Microsoft 365 Education.

- Microsoft Copilot 365.

- Microsoft Defender for Office 365.

- Microsoft Defender XDR.

- Fabric.

- Graph.

- Intune.

- Planner.

- Power Apps.

- Purview.

Microsoft vil fortælle alt om årsagen til det store nedbrud, der har ramt Microsoft 365, når selskabets teknikere har fået systemet på benene igen.

Selskabet meddeler i en statusopdatering udsendt klokken 07:18 fredag morgen, at nedbruddet har første prioritet og at alle kræfter er sat ind på at løse det.

"Når problemet er løst, vil vi fortælle i detaljer om årsagen og hvordan vi har løst det," meddeler Microsoft.

Det kommer til at ske i en udførlig såkaldt 'post incident-report,' som vi må formode, at mange lige nu venter på.

Ifølge Microsoft ser det ikke ud til, at der er tale om et cyberangreb. Men selskabet har lige nu ikke noget overblik over, hvad kæmpenedbruddet, der har ramt i mindst 74 lande, skyldes.

Microsoft tjenester har været nede i flere timer, noget som Microsoft selv kalder "service degradation" på deres statusside for tjenesterne. 

Pt. angiver it-giganten at det især er MS365 og forbrugerprodukterne som er nede, mens Azure skulle være oppe. 

Se selv statussiden hos Microsoft her.

Fejlene har ifølge Microsoft blandt andet ramt: 

• Exchange Online: Users may be unable to access their mailbox using Outlook on the web, Outlook desktop (MAPI), Exchange ActiveSync (EAS), or REST-based connections, and email delivery may be delayed.
• Microsoft 365 admin center: Admins may be unable to load some admin center pages.
• Microsoft 365 apps: Users may be unable to view their recently used files.
• Microsoft 365 Apps Admin Center: Multiple services including Cloud Update, Cloud Policy, and Inventory are affected.

Vær forsigtig i kølvandet på det store nedbrud, der har ramt Microsoft 365, lyder advarslen fra flere banker og sikkerhedsselskaber.

For cyberkriminelle kan meget vel se en mulighed for at forsøge at snyde og phishe, når Outlook igen kommer på benene advarer de.

Derfor skal du være opmærksom, hvis du modtager mails eller beskeder i din indbakke eksempelvis med besked om, at du skal klikke på links for at få løst problemerne eller lignende fra afsendere, der kan ligne Microsoft.

Det kan også være mails, der hævder at indeholde engangs-password eller med besked om, at du skal oprette et nyt password, ligesom du ikke bør klikke på attachements i mails af denne type, når først din Outlook er på benene.

Læs om nedbruddet her: Microsoft ramt af kæmpe-nedbrud i hele verden.