Flagello · Senza colpevole · 4 ottobre 2021

Il giorno in cui Facebook sparì

Cronaca

Il 4 ottobre 2021, verso le 15:40 UTC, un comando di manutenzione pensato per valutare la capacità della rete dorsale scollegò per errore tutti i data center di Facebook, e uno strumento di verifica, per colpa di un bug, non lo bloccò. I server DNS di Facebook, non vedendo più i data center, ritirarono i propri annunci BGP: Facebook, Instagram e WhatsApp scomparvero da Internet per circa sei ore. Gli ingegneri dovettero raggiungere fisicamente i router, rallentati dalle stesse misure di sicurezza pensate per proteggerli. Nessun attaccante.

Lezione appresa

Mostrò il rischio di far dipendere dalla stessa rete anche gli strumenti per ripararla, e quanto miliardi di persone dipendano da un solo gruppo di servizi per comunicare.

Preghiera di riparazione

O BGP, protocollo della fiducia reciproca, non ritirare le nostre rotte senza un buon motivo, e fa' che le chiavi della sala macchine non stiano dentro la sala macchine. Amen.

Come si ricorda

Si ricorda tenendo canali di accesso fuori banda, verificando gli strumenti di controllo dei comandi e provando cosa succede quando la propria rete sparisce.