Dansk stor-region efter nedbrud: Derfor gik it-systemerne i sort

Opdateret 14:50: Region efter kæmpenedbrud: Vi har fundet synderen.

Region Nord har efter morgenens totalnedbrud igen fået regionens sygehus-systemer på benene.

Nedbruddet ramte regionen klokken 03.45 i nat, da overvågnings-alarmen gik, hvorefter fejlsøgningen straks gik i gang.

“Vi lokaliserede fejlen en time senere – altså klokken kvart i fem i nat,” siger regionens it-chef, Claus Wegener Kofoed, til Computerworld.

Han blev vækket i nat – eller ‘aktiveret,’ som han kalder det – og dernæst fik han regionens allerede planlagte nødprocedurer i gang.

“Det er jo nogle timer med høj intensitet,” siger Claus Wegener Kofoed.

Nedbruddet skyldtes, at systemet ikke kunne få fat i fire redundante core-switche, hvilket fik hele netværket til at gå i sort.

Det en fejl, der ifølge Claus Wegener Kofoed ‘heldigvis’ er meget sjælden.

“Switchene var blevet overbelastet af det, som vi kalder en pakkestorm eller en multicast, der kom buldrende som en tsunami. Det skete på et splitsekund, og det gik så hurtigt, at ingen kunne nå at reagere,” siger Claus Wegener Kofoed.

Normalt har regionen ifølge ham en oppetid på 99,9699 procent.

“Vi har jo overvågning døgnet rundt, og systemet er bygget, så det selv vil lukke bestemte processer ned, hvis netværkstrafikken stiger med X procent,” siger han.

Det nåede systemet bare ikke at gøre i nat, fordi pakketstormen pludselig og uden varsel opstod og overbelastede systemet med meget stor kraft.

Da netværket røg, blev forbindelsen til regionens EPJ samtidig afbrudt.

Det varede indtil klokken 09.50 i formiddags, hvor netværket igen var på benene.

Opdateret 14:50: Region efter kæmpenedbrud: Vi har fundet synderen.

Fortsættes …