Konfigurationsfel hos Cloudflare slog ut X, OpenAI och fler

Den 18 november visade det sig att ett omfattande internetavbrott hade en enda felaktigt formaterad fil på Cloudflares servrar som ursprung. När filens storlek oväntat fördubblades utlöste det en kedja av tekniska fel och slog ut flera stora webbtjänster, däribland X, OpenAI och till och med vissa delar av McDonald’s. Cloudflare gick ut med en formell ursäkt, och medgrundaren Matthew Prince skrev i ett blogginlägg att ingenjörerna först misstänkte en cyberattack — inte minst eftersom Microsoft rapporterade en stor DDoS-attack samma dag — men att orsaken senare visade sig vara ett konfigurationsfel. Att en enda fil kunde ligga bakom så omfattande störningar säger mycket om hur tätt sammanflätad dagens infrastruktur har blivit.

Prince förklarade att incidenten varken direkt eller indirekt orsakades av en cyberattack eller annan illvillig aktivitet. Den hade sitt ursprung i en förändring av åtkomsträttigheter i ett av företagets databassystem, vilket gjorde att databasen skrev ut flera poster i den så kallade funktionsfilen som används av Cloudflares botthanteringssystem. Därmed fördubblades filens storlek och spreds därefter ut till samtliga maskiner i nätverket.

Filen laddades upp 11.05 UTC, men de första felen syntes först 23 minuter senare. Allt eftersom den spreds genom nätet växte problemen och nådde en topp kring 13.00. Ingenjörerna identifierade och rättade till felet 14.30, och vid 17.06 UTC var tjänsterna tillbaka i normalläge. Tidslinjen visar hur snabbt konfigurationsändringar kan få spridning — men också hur lång tid det kan ta att rulla tillbaka effekterna.