Afbrændt netkort var årsag til Jaynet-problemerne

Et afbrændt linjekort på 10 gigabit var årsag til en problemfyldt torsdag for både Jaynet og firmaets kunder.

Annonce:
Annonce:
Det var et defekt linjekort på 10 gigabit i en router på core-netværket, som torsdag var skyld i omfattende problemer for Jaynets privatkunder og mellem 50 og 75 private og offentlige hostingkunder.

Det fortæller André Dommer, der er administrerende direktør hos Jaynet.

Problemet opstod først på eftermiddagen på den anden af firmaets seks core-routere, der i Glostrup distribuerer trafikken fra blandt andet trafik til og fra firmaets hostingcenter ud i verden via en række leverandører.

Men inden Jaynet fik lokaliseret problemet til dette, fejlsøgte teknikere på core-router nummer et, hvor symptomerne opstod, fordi den fejlramte router nummer to automatisk videredistribuerede trafikken til nummer et som en slags nødprocedure.

Fejlsøger forkert sted
"Vi kunne se, at kunder, der lå på nummer et, havde problemer. Så derfor fejlsøgte vores teknikere på den router, som gav problemet. Men det viste sig så i sidste ende at være et ti-gigabit linjekort på core-router nummer to, der var brændt ned," siger André Dommer.

Core-router nummer to ved selv, at der der noget galt og sendte trafikken via core-router nummer tre ud i verden. Samtidig sendte nummer et til nummer to, som jo havde en fejl og derfor bare sendte trafikken tilbage.

"Det betød, at kunder, der 'sad' på etteren, havde problemer. Men det var kun den trafik, som gik ud via TDC-transit," siger han.

Det skyldes, at core-router nummer to med det defekte kort har hovedpulsåre direkte til Albertslundcentralen, hvor Jaynet kobler op imod TDC's transit.

Kunder med trafik via andre af Jaynets opkoblinger videre ud i verden var derfor ikke berørt, fordi den defekte core-router nummer to videredistribuerede trafikken til naborouterne i core-netværket.

Ulogiske fejl tager tid at finde
"Vores bud er, at mellem 50 og 75 af vore kunder har haft fejl på omkring 30 procent af trafikken. Afhængigt af, hvilken type trafik der har været tale om," siger André Dommer.

Han understreger, at alle hostingskunders services har været fuldstændig upårvirket af fejlen. Med andre ord kørte alt perfekt. Der var bare ikke kontakt til omverdenen med trafik via TDC-forbindelsen.

"Alle virtuelle servere, firewalls og back-up har været uberørt," siger han.

Han fortæller, at det desværre kan tage tid at finde denne type af fejl, hvor logikken ikke er helt klar fra begyndelsen.

"Det er jo sommerferietid, men vi havde heldigvis en af vores seniorteknikere stand-by, som var så venlig at komme ind," siger André Dommer.

André Dommer fortæller, at det samtidig er svært at gardere sig mod fejl som den der indtraf hos Jaynet torsdag.

"Det er ikke sådan, at vi kan sige, at det ikke vil ske igen. Men nu er vi den erfaring rigere, og så er vi klar over, at vi har sat systemerne rigtigt op. Og det er jo heldigvis det vigtigste," siger han.

Til gengæld lover han at sende en hændelsesrapport ud til kunderne inden 24 timer efter at fejlen blev rettet.

Ramte også privatkunder
Den defekte core-router stod også for distributionen af DNS-service til privatkundernes forbindelser.

Derfor havde kunderne i princippet internetforbindelse, der var bare ingen DNS-service til at oversætte webadresserne til ip-adresser, forklarer direktøren. Så hvis kunderne ellers kunne huske eksempelvis Computerworlds ip-adresse i hovedet, ville siden faktisk komme frem i browseren.

"Hvis du har skrevet ip-nummeret direkte ind, så har du været flyvende," siger han.

Computerworld har tidligere på dagen beskrevet, at Jaynet ikke torsdag oplyste privatkunderne om udviklingen af fejlløsningen efter klokken 14, hvor sidste melding var, at firmaet stadig arbejde på en løsning.

Men privatkundernes problem med internet- og telefonforbindelser var overstået omkring klokken 20.00, da Jaynet fik flyttet DNS-servicen, fortæller direktøren.

Ifølge André Dommer var erhvervskundernes problemer løst klokken 23.10 torsdag aften, hvilket Jaynet også meldte ud på firmaets informationsside om driftsstatus til erhvervskunderne.


Ytringer på debatten er afsenders eget ansvar - læs debatreglerne
Indlæser debat...




Brancheguiden
Brancheguide logo
Opdateres dagligt:
Den største og
mest komplette
oversigt
over danske
it-virksomheder
Hvad kan de? Hvor store er de? Hvor bor de?
Erhvervsakademiet Lillebælt
Udvikling og salg af klassebaseret undervisning, blandt andet inden for multimedie og it.

Nøgletal og mere info om virksomheden
Skal din virksomhed med i Guiden? Klik her

Kommende events
Computerworld Summit 2015 - digital innovation

Computerworld Summit giver dig internationale keynotes, diskussioner, oplæg, netværk og debat om innovation, kompleksitet og sikkerhed i it-afdelingen - sammen med 500 andre danske it-professionelle. Læs mere

SAS Radisson Blu Scandinavia - 2300 København S



Enterprise Content Management - få styr på data-junglen i din virksomhed

De fleste virksomheder genererer i stigende omfang store mængder data fra et stadig voksende antal kilder. Kom til dette How To og hør om gevinsterne ved at få styr på virksomhedens dataflow med de bedste enterprise content management-systemer. Læs mere

Pfizers Konferencecenter - 2750 Ballerup



Server/storage/virtualisering

Virksomhedernes forretningssystemer leverer data som aldrig før, og mængderne vokser i omfang. Det stiller krav til driftslaget om at kunne levere mere for samme budget, noget, det ikke er så nemt at opfylde med skyhøje priser på diske. Private og offentlige skyer giver nye muligheder og nye udfordringer. Og er der måske penge at spare ved at skifte virtualiseringsplatform? Hør om udfordringer og løsninger på Computerworlds How-To. Læs mere

Pfizers Konferencecenter - 2750 Ballerup







Computerworld
Vi skiftede ét stykke hardware - nu flyver fire år gammel computer som var den ny
Med tiden vil din computer føles, som var den fra det forrige århundrede. Men ved at skifte et bestemt stykke hardware, kan du sparke liv i den igen. Vi gjorde det med en Macbook Pro, og den føles nu som en helt anden computer.
CIO
Odense Kommune kunne ikke købe sig til it-løsning: Valgte i stedet at udvikle den selv
Der var ingen løsninger på markedet, og derfor valgte Odense Kommune at udvikle sin egen software-løsning. Her fortæller kommunen om erfaringerne med selv at udvikle software.
Comon
Skype-brugere raser: Hvorfor sniger Microsoft Bing og MSN med i installationen?
Når man installerer Skype, skal man være på dupperne, hvis man ikke ved samme lejlighed vil have Bing og MSN installeret. Det er langt fra alle Skype-brugere tilfredse med.
Channelworld
It-direktør tæller på knapperne: Skal jeg trække millionoverskud ud af mit firma?
Dansk hardware-forhandler har i de seneste 10 år tjent gode penge på salg af hardware. "Der er mange i branchen, der ikke synes, det er spor fancy at sælge en boks. Men der skal jo være en, der gør det."
White paper
Her er de 20 anbefalede sikkerhedsforanstaltninger
Portnox kan hjælpe dig med nemt at opnå mange af de 20 anbefalede sikkerhedsforanstaltninger fra SANS Institutes liste Critical Security Controls.