Les sites de Namecheap ont été hors ligne pendant 15 heures après une défaillance du refroidissement du centre de données de Phoenix ; 410 000 personnes privées d'électricité dans le nord de l'Illinois

Une défaillance mécanique dans un unique centre de données de Phoenix a retiré des sites web, des e-mails et des panneaux de contrôle d'Internet pendant une grande partie de jeudi, dans un incident qui a touché bien au-delà des clients de n'importe quel fournisseur. Par ailleurs, des tempêtes sévères ont privé d'électricité environ 410,000 clients de ComEd dans le nord de l'Illinois, les équipes des services publics continuant de reconstruire des parties du réseau des jours plus tard.

Une défaillance de refroidissement à Phoenix a mis hors ligne l'hébergement, les e-mails et la gestion DNS

Engadget a rapporté que Namecheap a attribué la perturbation à « une défaillance des systèmes de refroidissement » dans son centre de données de Phoenix, affectant les plans d'hébergement, EasyWP, DNS et clients d'e-mail, ainsi que le site web de l'entreprise elle-même. Le directeur général Hillan Klein a déclaré sur X que, sur la base des conditions à l'époque, l'entreprise anticipait de ramener les services clients en ligne à environ 15h00 à 15h30 ET. Les installations de PhoenixNAP ont signalé des « températures de l'espace blanc élevées » suite aux dommages causés par de fortes tempêtes nocturnes dans la ville.

La restauration a pris beaucoup plus de temps que cette première estimation. TechRadar Pro a rapporté que l'incident a pris environ 15 heures pour être complètement réparé : des problèmes sont apparus vers midi ET, deux des quatre refroidisseurs de l'installation ont été remis en service, les bases de données principales sont revenues vers 17h30 ET, et le service complet a été rétabli à 3h50 ET. Comme le service d'assistance de l'entreprise était également affecté, le personnel de soutien n'a pas pu répondre aux chats en direct et aux e-mails pendant la panne. Klein a déclaré que l'entreprise publierait un post-mortem couvrant « ce qui a conduit à cela, où nos sauvegardes et protocoles existants ont échoué, comment nous avons réagi », et a déclaré aux clients : « nous vous avons fait défaut aujourd'hui. »

L'incident n'était pas confiné à une seule marque. HostingJournalist a rapporté que l'installation est exploitée par RadiusDC, avec phoenixNAP comme locataire, et que Hosting.com a rapporté que des serveurs étaient indisponibles à son emplacement de Phoenix. Namecheap a déclaré que la résolution DNS continuait de fonctionner tandis que la gestion DNS était affectée — une distinction qui compte, puisque cela a laissé certains clients en ligne mais incapables de changer quoi que ce soit. La récupération a été délibérément étagée : d'abord les dispositifs réseau physiques, puis l'infrastructure réseau virtuelle, puis les services clients.

Pour quiconque dépend d'un seul fournisseur pour l'hébergement, les e-mails et le contrôle DNS en même temps, la leçon pratique est que ces fonctions peuvent partager un domaine de défaillance même lorsqu'elles semblent être des produits séparés. Vous pouvez suivre les services concernés sur les pages Status Is Down pour Namecheap et Hosting.com, ou parcourir la catégorie plus large de l'hébergement web et cloud, des bureaux d'enregistrement de domaines et de webmail.

Les tempêtes du nord de l'Illinois ont laissé 410 000 personnes sans électricité, avec une restauration s'étendant au week-end

De fortes tempêtes plus tôt dans la semaine ont privé d'électricité un bien plus grand nombre de clients à travers le nord de l'Illinois, et les équipes des services publics étaient toujours en train de reconstruire des parties du réseau jeudi.

Le Chicago Tribune a rapporté qu'environ 52 000 clients de la région de Chicago, principalement dans les banlieues sud et sud-ouest, étaient toujours privés d'électricité à 15h00 jeudi. Jeremy Smith, vice-président des opérations de distribution de ComEd, a déclaré qu'il s'attendait à ce qu'environ 99 % des clients soient rétablis d'ici 23h00 samedi, ajoutant : « Il y aura des poches qui iront jusqu'à dimanche. » Le maire de Homewood, Rich Hofeld, a déclaré que le service public lui avait dit qu'environ 58 % du village était toujours sans électricité ce matin-là, avec une mairie fonctionnant avec un personnel réduit et sans climatisation.

Shaw Local’s The Herald-News a rapporté le chiffre à l'échelle du territoire : près de 410 000 clients de ComEd ont perdu l'électricité, avec 85 % rétablis en fin d'après-midi. Dans le comté de Will seulement, le porte-parole de ComEd, David O'Dowd, a déclaré que plus de 105 000 clients étaient affectés à leur pire moment, tombant à un peu plus de 11 000 d'ici la fin de jeudi après-midi — un taux de rétablissement de 89 %. Les effets commerciaux étaient tangibles : une station-service à Joliet a échangé uniquement en espèces pendant un troisième jour, n'a pas pu vendre de carburant du tout sans électricité, a enregistré ses ventes sur papier et a réduit ses heures à la lumière du jour uniquement.

L'Illinois connaît une saison de tempêtes extraordinaire. ComEd a décrit cela comme son 20ème événement climatique majeur de l'année, et le Service météorologique national a déclaré au Tribune que l'État approchait 200 tornades en une seule année, contre une moyenne de 54 chaque année entre 1990 et 2020. Vous pouvez suivre le service public sur la page ComEd de Status Is Down ou dans la catégorie énergie, électricité et gaz.

Surveiller les services dont vous dépendez

Les deux incidents ont commencé avec des infrastructures physiques — une centrale de refroidissement et un réseau de distribution endommagé par une tempête — et les deux ont été visibles pour les clients longtemps avant d'être expliqués. Status Is Down suit les perturbations rapportées à travers des milliers de services et de sites web afin que vous puissiez voir quand quelque chose dont vous dépendez commence à échouer, plutôt que de le découvrir sur une page de statut après coup. Vous pouvez suivre l'activité en direct sur la vue des pannes en temps réel, rechercher dans le répertoire de sites web et répertoire de services, lire des rapports antérieurs dans l'archive d'articles, comparer plans et prix, et créer un compte pour suivre les services spécifiques qui comptent pour votre travail.

Sources

• Engadget — Le fournisseur d'hébergement Namecheap est hors ligne après une défaillance du refroidissement du centre de données
• TechRadar Pro — ‘Nous vous avons fait défaut aujourd'hui’ : Namecheap hors ligne pendant plusieurs heures après une défaillance de refroidissement du centre de données
• HostingJournalist — Namecheap et Hosting.com touchés par une panne du centre de données de Phoenix
• Chicago Tribune — ComEd a déclaré que la plupart de l'électricité devrait être rétablie dans le Southland d'ici samedi soir
• Shaw Local, The Herald-News — Jours chauds, nuits sombres et nourriture gâtée : Attente dans le comté de Will pour le retour de l'électricité après la tempête