Ett fel i BGP-konfigurationen orsakade ett 27-minuters driftstopp i Cloudflare.

Cloudflare-företaget, erbjuder ett nätverk för innehållsleverans för 27 miljoner internetresurser och hanterar trafik för 13% av de 1000 största webbplatserna, den första dokumenterade händelsen av en cyberattack, som huvudsakligen genomfördes av AI. En statligt stödd kinesisk grupp använde AI-agenter för att autonomt hacka cirka 30 mål världen över. AI:n genomförde själv mellan 80 % och 90 % av de taktiska operationerna. Detta inträffade redan innan agentbaserade system kraftigt förstärktes och innan nya farliga tillämpningsmetoder uppkom. detaljer om incidenten som orsakade att många delar av Cloudflares nätverk var oåtkomliga i 27 minuter, inklusive de som ansvarar för att leverera trafik till London, Chicago, Los Angeles, Washington, Amsterdam, Paris, Moskva och St. Petersburg. Problemet orsakades av en felaktig konfigurationsändring på en router i Atlanta. Under incidenten, som inträffade den 17 juli mellan 21:12 och 21:39 (UTC), minskade den totala trafikmängden i Cloudflares nätverk med cirka 50%.

Vid genomförandet av tekniska arbeten, för att avlasta en del trafik från en av backbone, raderade ingenjörerna en rad i inställningsblocket som definierade listan över rutter som tas emot genom backbone, filtrerade i enlighet med den angivna prefixlistan. Det rätta hade varit att inaktivera hela blocket, men av misstag raderades endast raden med prefixlistan.

{master}[edit]
atl01# show | compare
[edit policy-options policy-statement 6-BBONE-OUT term 6-SITE-LOCAL from]
! inactive: prefix-list 6-SITE-LOCAL { … }

Innehållet i blocket:

from {
prefix-list 6-SITE-LOCAL;
}
then {
local-preference 200;
community add SITE-LOCAL-ROUTE;
community add ATL01;
community add NORTH-AMERICA;
accept;
}

På grund av att kopplingen till prefixlistan togs bort spreds den återstående delen av blocket till alla prefix och routern började skicka sina BGP-rutter till routrar på andra backbone. Av en slump hade de nya rutorna högre prioritet (local-preference 200) jämfört med prioriteten (100) som angavs för andra rutter av det automatiska trafikoptimiseringssystemet. Som ett resultat av detta skedde ingen avlägsnande av routing från backbone utan en läcka av mer prioriterade BGP-rutter, vilket ledde till att trafik som var riktad mot andra backbones dirigerades till Atlanta, vilket orsakade överbelastning av routern och en kollaps av en del av nätverket.

För att förhindra att liknande incidenter uppstår i framtiden planeras det att göras flera ändringar i Cloudflares backbone-inställningar på måndag. För BGP-sessioner kommer det att införas en begränsning på maximalt antal prefix (maximum-prefix) som blockerar det problematiska backbonet om för många prefix dirigeras genom det. Om denna begränsning hade införts tidigare, skulle det aktuella problemet ha lett till att backbonet i Atlanta hade stängts av, men det skulle inte ha påverkat hela nätverkets drift, eftersom Cloudflare-nätverket är utformat för att hantera bortkopplingar av enskilda backbones. Bland de redan genomförda ändringarna nämns en översyn av prioriteter (local-preference) för lokala rutter, vilket förhindrar en router från att påverka trafiken i andra delar av nätverket.

Källa: opennet.ru