Jedna vadná aktualizace bezpečnostního softwaru, miliony modrých obrazovek, stojící letiště a banky. Co se v červenci 2024 stalo a co si z toho odnést?

Výpadek CrowdStrike: největší IT kolaps v dějinách?

V pátek 19. července 2024 se svět probudil do moře modrých obrazovek. Bezpečnostní firma CrowdStrike vydala vadnou aktualizaci svého produktu Falcon a počítače s Windows, na kterých běžel, začaly hromadně padat do kritické chyby. Podle Microsoftu bylo zasaženo přes 8,5 milionu počítačů po celém světě. Paradox roku: nešlo o hackerský útok, ale o chybu softwaru, který měl firmy před útoky chránit. Události se přezdívá největší IT výpadek historie.

Jedna aktualizace, celosvětová lavina

CrowdStrike Falcon je podnikový bezpečnostní nástroj, který kvůli účinné ochraně běží v jádru operačního systému. Právě proto byla chyba tak zničující: vadný konfigurační soubor, který firma automaticky rozeslala, způsobil pád systému hned při startu. Počítač se restartoval a spadl znovu. Miliony strojů se ocitly v nekonečné smyčce modré obrazovky smrti. Oprava sice vyšla během hodiny, ale postižené počítače si ji už nedokázaly samy stáhnout.

Stojící letiště, banky i nemocnice

Následky byly vidět všude. Letecké společnosti rušily tisíce letů a na letištích se odbavovalo perem a papírem, protože systémy ležely. Problémy hlásily banky, burzy, televizní stanice, nemocnice odkládaly plánované zákroky, nefungovaly pokladny obchodních řetězců. Škody se odhadují v miliardách dolarů. A náprava byla ruční práce: technici museli mnohde obejít počítač po počítači, nastartovat ho v nouzovém režimu a vadný soubor smazat. U velkých firem to znamenalo dny práce.

Poučení první: i ochrana může položit systém

CrowdStrike ukázal nepříjemnou pravdu: každý software s hlubokým přístupem do systému je zároveň riziko, včetně toho bezpečnostního. Neznamená to ochranu vypnout, ale počítat s tím, že selhat může kterákoli komponenta. Pomáhá postupné nasazování aktualizací (nejdřív pár strojů, pak zbytek), testovací skupina počítačů a schopnost rychle se vrátit zpět. Slepá důvěra v to, že „dodavatel to jistě otestoval", vyšla v červenci 2024 svět draho.

Poučení druhé: mějte plán B

Druhá lekce zní: rozdíl mezi firmou, která stála hodiny, a firmou, která stála dny, dělal připravený plán obnovy. Kdo věděl, kde má zálohy, jak nastartovat nejdůležitější systémy a kdo co dělá, jel brzy dál. Kdo spoléhal na to, že „ono to nějak pojede", improvizoval. Havarijní plán, otestované zálohy a funkční IT podpora nejsou papíry do šuplíku. Podobným příběhům se věnujeme i v článku o kuriózních výpadcích.

Firmy, které se vzpamatovaly nejrychleji, měly společné to, že věděly, co kde mají. Tuhle evidenci vedeme u každého zákazníka v externí správě IT.

Aby vás příští pátek nezaskočil

V MAGNAPRO pomáháme firmám přesně s touhle připraveností: promyšlené aktualizace, otestované zálohy, monitoring a plán, co dělat, když se něco pokazí. Většinu incidentů řešíme vzdáleně během minut a naši klienti vědí, komu zavolat, když obrazovky zmodrají. Chcete mít jistotu, že příští globální průšvih vaši firmu nepoloží? Spojte se s námi a připravíme vás předem.

Nezávazná poptávka ← Zpět na blog