Cloud / Webhotel nedbrud 15 maj

15 maj 07:12: I øjeblikket erfarer vi driftsforstyrrelser på dele af vores netværk. Vi og vores levandør arbejder på sagen.

15 maj 07:39: En tekniker er til stede.

15 maj 08:34: Enkelte nodes er oppe igen. Vi arbejder på at få sagen normaliseret.

15 maj 08:46: Vi er i gang med at udskifte en switch.

15 maj 09:07: Netværket er oppe igen. Clusteret er dog ude af sync. Vi synkroniserer data på tværs og starter maskinerne efterfølgende.

15 maj 10:24: Dette tager desværre tid. Vi arbejder på det.

15 maj 11:16: Det sidste data er ved at blive synkroniseret. Vi forventer at kunne starte maskinerne indenfor en halv times tid.

15 maj 11:32: Vi beklager nedetiden, og forstår naturligvis at dette er kritisk for vores kunder. Berørte kunder kan kontakte support@exaweb.dk for dialog om kompensation (i henhold til SLA).

15 maj 12:06: Det lykkedes desværre ikke til kl 12.00. Årsagen er relateret til storage gateway. Ny status meldes snarest.

15 maj 12:57: Ny status haves indenfor 10 minutter.

15 maj 13:01: Vi og vores leverandør arbejder fortsat på at løse problemet. Ny status kl 14.00.

15 maj 14:06: Vi og vores leverandør arbejder fortsat på at løse problemet. Ny status kl 15.00.

15 maj 14:33: Der opleves problemer med en disk i det bagvedliggende storage gateway på det virtuelle platform. Vi arbejder stadig på at få det løst. Vi beklager de gener nedbruddet medfører, og kommer med detaljeret redegørelse og hændelsesforløb så snart problemet er løst.

15 maj 15:00: Vi har nu udbedret den tekniske defekt, som viste sig at være et defekt backplane. Vi arbejder videre på at få platformen online igen. Ny status kl 17.00

15 maj 16:58: Backplanen er udskiftet. Vi arbejder lige nu på at flytte data tilbage til cloud-platformen. Dette er en manuel proces. Serverne kommer online igen gradvist mellem nu og kl 19.00.

15 maj 17:00: Vi kommer senere med en udmelding, og detaljeret forklaring på dagens udfald. Når alt er online igen, vil den enkelte kunde blive kontaktet med dialog om hvad vi gør for at undgå lignende i fremtiden. Samt info og evt. muligheder for kompensation.

15 maj 18:09: De første servere er ved at komme online igen. Vi har udvidet åbningstiderne på telefonen (70 22 29 32) til kl 21.00.

15 maj 19:24: Alt skulle være i drift igen. Kontakt supporten på 70 22 29 32 hvis der fortsat opleves problemer.

15 maj 21:40: Der opleves fortsat problemer på enkelte maskiner. Vi fejlfinder.

15 maj 23:07: Vi og vores leverandør arbejder fortsat på at løse problemet.

16 maj 07:02: Vi afventer status fra leverandøren.

16 maj 08:52: Der arbejdes på alternative løsninger for kunderne på det delte hostingmiljø.

16 maj 09:21: Vi kan ikke tilgå diske lige pt. Vi kan derfor ikke hive data ud, og lave et restore på en anden maskine. Der arbejdes forsat med leverandøren på at få løst problemerne. Ny status kommer kl 11.

16 maj 11:27: De fleste maskiner kører igen. Der er enkelte maskiner som ikke kan tilgås. Dele af CLOUD-kontrolpanelet lukkes ned i ca 30 minutter, så systemet får luft til den sidste del der mangler at komme op. Ny status sendes kl 13.00

16 maj 13:44: Den sidste maskine i det delte hosting-miljø er kommet op igen.

16 maj 14:24: Der er stadig et par maskiner som mangler at komme online. Denne side opdateres med ny status minimum hver anden time.

16 maj 16:33: Alt er online. Der er datatab på enkelte maskiner. Vi er i øjeblikket i dialog med disse kunder om mulige løsninger.

17 maj 07:49: Der er forsat ustabil drift. Vi arbejder stadig på at løse problemerne.