La settimana scorsa DreamHost ha riscontrato un’interruzione generalizzata del sistema che ha impattato il servizio per un grande numero dei nostri clienti con servizi ospitati nel nostro data center “PDX1”. Molti dei nostri sistemi erano irraggiungibili e meno della met\u00e0 dei siti dei nostri clienti ha sperimentato periodi di inattivit\u00e0.<\/p>\n\n\n
Il servizio \u00e8 stato ripristinato in gran parte entro 12 ore e ora che la situazione si \u00e8 stabilizzata, volevamo fornirti un aggiornamento su cosa \u00e8 successo, perch\u00e9 \u00e8 successo e quali sono i nostri piani per evitarne il ripetersi.<\/p>\n\n\n
In breve: La mattina di gioved\u00ec 2 novembre, uno dei data center che ospita un grande numero dei nostri server ha perso alimentazione e i suoi sistemi di alimentazione ridondanti non hanno funzionato.<\/p>\n\n\n
Questo non avrebbe dovuto <\/em>accadere. Il nostro Data Center a Hillsboro, Oregon (\u201cPDX1\u201d) \u00e8 gestito da Flexential, un leader comprovato nella costruzione, gestione e operazioni di Data Center. Flexential \u00e8 responsabile della fornitura di energia ai nostri server in questo impianto.<\/p>\n\n\n A loro merito, il loro piano operativo per gestire i problemi di alimentazione segue le migliori pratiche del settore e i loro sistemi di alimentazione ridondanti sono un elemento chiave di quello che \u00e8, secondo tutti i conti, un impianto all’avanguardia. Tuttavia, come hanno dimostrato gli eventi della scorsa settimana, la realt\u00e0 di un evento di interruzione di corrente imprevisto pu\u00f2 avere implicazioni impreviste e un effetto a catena che pu\u00f2 riverberarsi in tutto Internet.<\/p>\n\n\n Una configurazione standard e comune per la ridondanza di alimentazione nei data center \u00e8 quella di costruire due sistemi di alimentazione completamente ridondanti. Ogni sistema ottiene la sua energia da un’utilit\u00e0 tramite un percorso ridondante unico. Ogni sistema contiene anche una propria banca di UPS (alimentatori ininterrotti – noti anche come “batterie di emergenza”) e una flotta di generatori diesel \u00e8 presente in loco per alimentare l’intero impianto<\/em> se necessario.<\/p>\n\n\n Mentre \u00e8 in arrivo un rapporto completo da Flexential, quello che abbiamo osservato da parte nostra \u00e8 stata una perdita parziale di energia seguita da una perdita completa di energia per la nostra flotta di server. Vogliamo essere chiari – questa avrebbe dovuto essere una condizione “impossibile” e avevamo tutte le garanzie che lo fosse, inclusa una garanzia di disponibilit\u00e0 energetica del 100% (SLA). Questi sistemi energetici vengono testati regolarmente e sottoposti a manutenzione programmata regolare per assicurare che funzionino come previsto.<\/p>\n\n\n Durante un tipico blackout del data center (pianificato o non pianificato), le batterie UPS entrano in azione automaticamente giusto il tempo necessario per attivare i generatori alimentati a diesel della struttura.<\/p>\n\n\n Non \u00e8 chiaro perch\u00e9 o come il sistema UPS sia fallito, i generatori abbiano fallito, o come entrambi questi sistemi di alimentazione automatici, ridondanti e indipendenti siano riusciti a fallire cos\u00ec spettacolarmente allo stesso tempo. Crediamo che ci\u00f2 sia stato il risultato di un guasto della rete elettrica cos\u00ec come di un fallimento del generatore e dell’UPS. \u00c8 in corso un’indagine completa e ci aspettiamo di ricevere i risultati a breve.<\/p>\n\n\n Indipendentemente dalla causa, il nostro obiettivo e la nostra priorit\u00e0 durante questo evento era riattivare le nostre macchine e ripristinare il servizio per i nostri clienti.<\/p>\n\n\n Siamo stati allertati per la prima volta a un’interruzione alle 4:41 del mattino ora locale di gioved\u00ec 2 novembre, tramite i nostri strumenti di monitoraggio esterni. Abbiamo immediatamente inviato membri del nostro team di operazioni del Data Center presso l’impianto per iniziare il processo di ripristino dei servizi. Abbiamo pubblicato un post di stato<\/a> poco dopo per aiutare i clienti a seguire gli sforzi di ripristino del servizio.<\/p>\n\n\n Una volta resoci conto dell’intera portata di questo guasto, tutto il nostro team esecutivo \u00e8 stato contattato e messo in allerta, mentre ogni specialista del nostro team di Infrastruttura (sia quelli locali al data center che quelli che lavorano da remoto) \u00e8 stato coinvolto per riattivare i sistemi.<\/p>\n\n\n In un certo momento durante questa risposta, anche il sistema di controllo accessi<\/em> dell’edificio ha perso energia, rendendo un po’ difficile per il nostro team accedere. Quando l’energia \u00e8 stata finalmente ripristinata completamente alla nostra parte del datacenter alle 6:08 del mattino, la ridondanza che avevamo integrato nella nostra infrastruttura energetica interna ha funzionato come previsto e come progettato.<\/p>\n\n\n Riavvii improvvisi e interruzioni di corrente – a qualsiasi livello – possono causare sia guasti hardware che comportamenti imprevisti nel software. Come previsto, abbiamo assistito a entrambi i fenomeni.<\/p>\n\n\n Sebbene un singolo PC desktop o laptop possa recuperare con grazia da una perdita di energia improvvisa, sfortunatamente questa non \u00e8 la realt\u00e0 nel contesto di un’installazione di un grande Data Center. Con migliaia di server e decine di switch installati in questa localit\u00e0, \u00e8 stato un processo accurato (ben documentato ed eseguito) per riportare i sistemi online, testare ciascuno di essi per comportamenti anomali e, infine, prendere le azioni correttive necessarie.<\/p>\n\n\n Anche se nessun dato cliente \u00e8 mai stato a rischio<\/em>, abbiamo dovuto sostituire pi\u00f9 di qualche hard disk e modulo di RAM nel nostro parco server. Il taglio di corrente improvviso ha anche causato il ritorno di alcuni switch di rete a versioni pi\u00f9 vecchie del loro firmware, richiedendo aggiornamenti e ripristini da configurazioni precedentemente salvate.<\/p>\n\n\n Dopo una lunga giornata di pulizia e molte ore di lavoro da parte dei nostri team tecnici, siamo finalmente riusciti a segnalare tutti i principali sistemi come ripristinati e abbiamo continuato a lavorare durante la notte per identificare e riparare eventuali sistemi aggiuntivi che necessitavano di attenzione. Abbiamo risolto questo incidente alle 16:49 di gioved\u00ec, poco meno di 12 ore dall’inizio dell’interruzione di corrente.<\/p>\n\n\n Molti dei nostri clienti hanno visto il servizio completamente ripristinato in meno di un’ora. Altri hanno dovuto attendere molto pi\u00f9 tempo. \u00c8 stata veramente una giornata di massimo impegno per noi nel Data Center, e apprezziamo la pazienza e la cortesia che molti di voi hanno dimostrato nei vostri messaggi al nostro team di supporto.<\/p>\n\n\n Siamo in conversazione con Flexential questa settimana per capire dove sono avvenuti i guasti e quali sono i loro piani per evitare che questo scenario si verifichi in futuro.<\/p>\n\n\n Se mai dovessi riscontrare problemi con i tuoi siti ospitati da DreamHost e sospetti che la causa possa essere un’interruzione pi\u00f9 ampia del sistema, assicurati di fare di https:\/\/www.dreamhoststatus.com\/<\/a> la tua prima tappa per informazioni. Gli aggiornamenti sullo stato del nostro sistema sono anche pubblicati su @dhstatus<\/a> su X.<\/p>\n\n\n Se sei stato colpito dagli eventi dello scorso gioved\u00ec, accetta le nostre sincere scuse.<\/p>\n\n\n Ci rendiamo conto che hai scelto DreamHost, non un data center, per essere il tuo partner online di fiducia. Non dovresti preoccuparti di chi fornisce servizi al tuo sito web “pi\u00f9 a monte”. Anche se volevamo fornire chiarezza su questo evento, comprendiamo che la responsabilit\u00e0 finale \u00e8 nostra.<\/p>\n\n\n Ci scusiamo per l’assoluto disagio che questo ha causato ai tuoi siti, alle tue attivit\u00e0 e alla tua reputazione online. Faremo tutto il possibile per assicurarci che un evento del genere non si ripeta.<\/p>\n","protected":false},"excerpt":{"rendered":" La settimana scorsa DreamHost ha subito un’interruzione di sistema diffusa che ha impattato il servizio per un vasto numero dei nostri clienti con servizi ospitati nel nostro data center “PDX1”. Molti dei nostri sistemi erano irraggiungibili, e meno della met\u00e0 dei siti dei nostri clienti ha sperimentato periodi di inattivit\u00e0. Il servizio \u00e8 stato per lo pi\u00f9 ripristinato entro 12 ore, e ora che il [\u2026]<\/p>\n","protected":false},"author":3,"featured_media":0,"menu_order":0,"template":"","meta":{"_acf_changed":false,"_yoast_wpseo_metadesc":"Un'analisi post mortem sugli eventi di gioved\u00ec scorso, causati da una temporanea perdita di alimentazione nel nostro data center PDX1 in Oregon.","footnotes":""},"class_list":["post-11638","announcement","type-announcement","status-publish","hentry"],"acf":[],"yoast_head":"\nSistemi Ridondanti<\/h2>\n\n\n
La Nostra Risposta<\/h2>\n\n\n
La Pulizia<\/h2>\n\n\n
Prossimi Passi<\/h2>\n\n\n
Ci Dispiace<\/h2>\n\n\n