Nejdražší překlepy a drobné chyby v dějinách IT

Raketa za miliardy zničená přetečením proměnné, sonda ztracená kvůli palcům a metrům, půlka internetu vypnutá překlepem. Malé chyby, velké účty.

Malé chyby, astronomické účty

V IT platí zvláštní nepoměr: velikost chyby vůbec neodpovídá velikosti škody. Stačí jeden znak, jedna proměnná nebo jedna špatně přečtená jednotka a výsledkem jsou miliardové ztráty. Dějiny informačních technologií nabízejí několik učebnicových příběhů, kde drobný přehmat spustil katastrofu. Nejsou to ale historky pro pobavení na účet nešikovných inženýrů. Každý z těch příběhů končí stejným poučením: selhal proces, ne člověk. A to je lekce, která platí pro každou firmu s počítačem.

Ariane 5: přetečení za miliardy (1996)

Čtvrtého června 1996 odstartovala z Kourou nová evropská raketa Ariane 5. Po zhruba čtyřiceti sekundách se vychýlila z dráhy a explodovala. Příčinou byl kus softwaru převzatý ze starší Ariane 4, který převáděl údaj o rychlosti do menšího číselného formátu. Ariane 5 však letěla svižněji, hodnota se do formátu nevešla a proměnná přetekla. Navigace poslala řízení nesmyslná data a raketa i s nákladem skončila v troskách. Nikdo neotestoval starý kód v nových podmínkách.

Mars Climate Orbiter: palce versus metry (1999)

Sonda NASA Mars Climate Orbiter doletěla v září 1999 k Marsu a už se neozvala. Vyšetřování odhalilo trapně prostou příčinu: jeden tým počítal v angloamerických jednotkách, druhý v metrických. Software dodavatele předával údaje o síle v librách, navigační tým NASA je četl jako newtony. Drobný nesoulad při každé korekci dráhy se sčítal, sonda se k planetě přiblížila příliš nízko a zanikla v atmosféře. Mise za stovky milionů dolarů skončila kvůli chybějící kontrole jednotek na rozhraní dvou týmů.

AWS 2017: překlep, který vypnul kus internetu

V únoru 2017 řešil technik Amazonu zpomalení účtovacího systému cloudového úložiště S3. Zadal rutinní příkaz k odstavení několika serverů, jenže s překlepem v parametru. Odstavil tak serverů mnohem víc, včetně důležitých subsystémů. Výsledek: několikahodinový výpadek S3 v nejvytíženějším regionu a s ním problémy tisíců webů a aplikací, které na úložišti závisely. Amazon poté upravil nástroje tak, aby příliš rychlé odstavení kapacity vůbec neumožnily. Systém nově hlídá člověka.

Pointa: procesy a kontrola, ne hledání viníka

Všimněte si, co spojuje všechny tři příběhy. Nikde nebyl hlupák. Byli tam zkušení profesionálové, chyběla ale pojistka: test starého kódu v nových podmínkách, kontrola jednotek, limit v nástroji. Vyspělé organizace proto po incidentu nehledají viníka, ale díru v procesu. Křičet na technika je zadarmo a nefunguje; opravit proces něco stojí a funguje. Jak vypadají takové pojistky v běžné firmě, ukazuje našich 7 kroků kyberbezpečnosti.

Pojistky pro vaši firmu

Ve firemním IT mají pojistky podobu záloh, testování změn, monitoringu a jasných postupů, tedy přesně toho, co v MAGNAPRO klientům nastavujeme a dlouhodobě hlídáme. Protože i ve vaší firmě jednou někdo udělá překlep; otázka je jen, jestli ho zachytí systém, nebo účetní uzávěrka. Chcete, aby drobná chyba zůstala drobnou? Napište nám a projdeme spolu, kde vám pojistky chybí.

Nezávazná poptávka  ← Zpět na blog