Panne chez OVH – Sites OVH et e-mail down – #OVHGATE

Actuellement, une panne grave a lieux chez OVH. Si vos clients vous harcèlent depuis ce matin et que votre smartphone surchauffe, voilà pourquoi.
Le retour à la normale dans les délais de réception devrait intervenir vers 23h00 en France.
Ce matin, panique. Dès la première heure, tous mes clients appellent. Tous n’ont plus accès à leurs mails, voir leur site web. Certains râlent plus que d’autres, et en tous cas la situation est complètement bloquante pour tout le monde.
Leur point commun? OVH. Depuis ce matin ils ont un problème d’alimentation électrique (ca arrive) sur un datacenter, plus un défaut sur les chaines de groupes électrogènes (ca fait beaucoup!).
Nous avons un souci d'alimentation de SBG1/SBG4. Les 2 arrivées électriques EDF sont down (!!) et les 2 chaines de groupes électrogènes se sont mis en défaut (!!!). L’ensemble de 4 arrivées elec n'alimentent plus la salle de routage. Nous sommes tous sur le problème.
— Octave Klaba (@olesovhcom) November 9, 2017
Un problème Doc ?
Et puis quand c’est la loose, c’est jusqu’au bout, puisqu’on nous annonce une panne sur le réseau fibré…
En plus de souci sur SBG, nous avons le souci sur le réseau optique en Europe qui interconnecte RBX et GRA avec les POP. Il est down (!!).
— Octave Klaba (@olesovhcom) November 9, 2017
On nous invoque ensuite la loie de Murphy…
SBG: ERDF is trying to find out the default. 2 separated 20kV lines are down. We are trying to restart 2 generators A+B for SBG1/SG4. 2 others generators A+B work in SBG2. 1 routing room is in SBG1, the second in SBG2. Both are down. #Murphy
— Octave Klaba (@olesovhcom) November 9, 2017
Bref, là ça devient compliqué et un peu flippant. Si vous avez déjà été impacté par les problèmes réseaux du site de Gravelines il y a un mois, vous devez, comme moi, être un peu flippé d’avoir vendu pas mal de plans MX ou des sites web chez OVH à vos clients. Ce dernier problème avait impacté mes clients (lenteurs réseaux à cause d’un routeur, rendant l’authentification aux serveurs de messageries impossible) pendant plus d’une semaine…
Une panne EDF, ça arrive, une panne fibre, ça arrive. Mais le coup du système de sécurité électrique (les groupes électrogènes qui ne fonctionnent pas), ça me semble quand même légèrement abusé, pour un hébergeur aux ambitions grandissantes…