← Zpět na Akamai

Akamai · 22. července 2021

Výpadek Akamai Edge DNS 22. 7. 2021 — chyba v konfiguraci shodila banky i aerolinky

Aktualizace softwarové konfigurace spustila chybu v Akamai Edge DNS a na zhruba hodinu znedostupnila weby bank, aerolinek a herních služeb po celém světě. Mimo provoz byly mimo jiné FedEx, UPS, AT&T, Airbnb, Chase, American Express, HBO Max, Steam i PlayStation Network. Nešlo o kybernetický útok.

Datum
2021-07-22
Délka výpadku
1 h
Zasažené regiony
Global
Závažnost
major
Dopad
Banky, aerolinky a herní služby globálně — FedEx, UPS, AT&T, Airbnb, Chase, American Express, HBO Max, Steam, PSN
Provider
Akamai

Časová osa incidentu

  1. 15:38 UTC Aktualizace konfigurace spouští chybu v Akamai Edge DNS; DNS dotazy začínají selhávat.
  2. 15:45 UTC Plošný dopad — weby bank, aerolinek a herních služeb nedostupné.
  3. 16:00 UTC Akamai identifikuje a stahuje problematickou změnu konfigurace.
  4. 16:45 UTC Služba obnovena; Akamai potvrzuje, že nešlo o útok.
  1. července 2021 odpoledne (SELČ) zmizela z internetu řada kritických služeb — internetové bankovnictví, weby aerolinek i velké herní platformy. Společným jmenovatelem byl Akamai Edge DNS, autoritativní DNS služba, na které tyto firmy závisely.

Co se přesně stalo

Spouštěčem byla aktualizace softwarové konfigurace, která odhalila chybu v systému Edge DNS. Protože DNS je první krok každého připojení — překlad doménového jména na IP adresu — jeho výpadek znamená, že se uživatel k webu vůbec nedostane, i když samotné servery běží. Proto byl dopad tak plošný a okamžitý.

Akamai problematickou změnu stáhla a službu obnovila zhruba do hodiny. Výslovně potvrdila, že nešlo o kybernetický útok. Příznačné je, že firmy s multi-CDN / multi-DNS přístupem (například Amazon) zůstaly z velké části ušetřeny.

Jak se před podobným výpadkem chránit

DNS výpadek je obzvlášť zákeřný: web i servery můžou být v pořádku, a přesto je nikdo nedohledá. Obrana proto musí být na úrovni DNS.

  • DNS u dvou nezávislých providerů současně (dual-write) odstraní jediný bod selhání — když jeden vypadne, doménu obslouží druhý.
  • Nezávislý monitoring rozezná výpadek DNS od výpadku serveru, což je klíč ke správné reakci.
  • Automatické přepnutí udrží web dohledatelný i ve chvíli, kdy primární DNS mlčí.

Redundio drží DNS u dvou nezávislých providerů a překlápí záznamy automaticky — přesně proto, aby vás chyba jednoho DNS systému nepoložila.

Odhad dopadu

Zasaženy byly kritické služby v bankovnictví, letecké dopravě a zábavě. Firmy s multi-CDN přístupem (např. Amazon) dopad z velké části necítily.

Co by udělalo Redundio

Redundio by vaši CDN přepnulo během minut.

Nezávislý monitoring pozná výpadek CDN i tehdy, když status stránka providera ještě svítí zeleně, ověří dvojitou kontrolou, co přesně selhalo, a překlopí DNS na zálohu — bez nočního zásahu.

Chci do pilotu

Zdroje

Časté otázky

Zhruba hodinu. Klíčové narušení DNS trvalo přibližně 40–60 minut; služba byla obnovena necelou hodinu po začátku.

Ne. Akamai potvrdila, že příčinou byla chyba spuštěná aktualizací softwarové konfigurace v systému Edge DNS, nikoli útok.

Weby a aplikace v bankovnictví, letecké dopravě a zábavě — mimo jiné FedEx, UPS, AT&T, Airbnb, Chase, American Express, HBO Max, Steam a PlayStation Network.