Un gros incendie a détruit une partie du centre de données strasbourgeois d’OVH 🆕

Nicolas Furno |

Un incendie violent s’est déclaré vers quatre heures ce matin au centre de données strasbourgeois d’OVH, le numéro un de l’hébergement en Europe. Malgré la mobilisation sur place d’une centaine de pompiers, d’une quarantaine d’engins et malgré l’aide des secours allemands venus en renfort, l’incendie a entièrement détruit l’un des bâtiments qui hébergeaient des serveurs. Un autre bâtiment a été partiellement détruit, et deux autres ont été épargnés, mais restent encore isolés.

Le feu a été maîtrisé vers 5h30, mais les pompiers sont toujours sur place pour l’éteindre entièrement. Il n’y a eu fort heureusement aucune victime humaine, les quelques employés d’OVH présents sur place ont pu quitter les lieux à temps. Le bilan matériel est en revanche lourd pour l’hébergeur : le bâtiment SBG2 a été complètement détruit et son voisin SBG1 l’a été partiellement.

SBG3 et SBG4 ont été épargnés par les flammes, mais l’arrivée électrique sur tout le site ayant été coupée, l’entreprise conseille de ne pas compter sur ces installations. Le créateur d’OVH Octave Klaba a indiqué sur Twitter que l’accès au site était impossible et qu’il ne fallait pas compter sur un redémarrage aujourd’hui. Les serveurs stockés dans SBG1 et SBG2 sont soit détruits, soit inaccessibles jusqu’à nouvel ordre, sachant qu’il faudra reconstruire l’un des bâtiments.

Pendant l’incendie (photo @ITA6768).

Pour information, MacGeneration est hébergé par OVH, mais dans un centre de données différent. L’incendie à Strasbourg n’a pas d’impact négatif sur nos services, mais plusieurs sites sont indisponibles ce matin, dont des sites officiels. Cet incident tombe en tout cas bien mal pour l’hébergeur, qui se préparait justement à entrer prochainement en bourse.

MàJ le 10/03/2021 10:38 : à dix heures, Octave Klaba, qui s’est rendu sur place, indique qu’ils envisagent d’entrer dans SBG3 pour évaluer les dégâts. Un plan va être mis en place pour redémarrer le site, au moins pour SBG3 et SBG4, peut-être SBG1 si les dégâts ne sont pas trop important.

MàJ le 10/03/2021 11:15 : les serveurs dans SBG3 sont tous en bon état, même s’ils restent éteints pour le moment. OVH va mettre en place un plan pour leur remise en ligne, sans donner d’estimation de temps pour le moment.

MàJ le 10/03/2021 11:43 : la moitié de SBG1 est détruit, d’après Octave Klaba. On comprend mieux pourquoi en regardant cette vue aérienne du site, fournie par Google Maps (via lafibre.info) : le bâtiment SBG2 qui a été totalement détruit est celui sous l’épingle rouge, au centre du site. SBG1 est situé à sa gauche et sa structure en deux parties explique pourquoi la moitié a été détruite. SBG3 est placé à sa droite et les pompiers ont réussi à maîtriser l’incendie à temps, si bien que ses serveurs n’ont pas été endommagés.

Vue du dessus…
Et depuis le côté ce matin. Sur cette photo, on voit bien que la première rangée de SBG1, créé avec des conteneurs, a été touchée par l’incendie, mais pas la seconde.

Reste que pour relancer l’activité, il faut attendre que l’incendie soit entièrement éteint, s’assurer de la sécurité de l’ensemble et vérifier en particulier que le circuit électrique fonctionne encore correctement. Il va falloir faire preuve de patience…

MàJ le 10/03/2021 13:12 : première esquisse de plan de relance pour SBG1, SBG3 et SBG4, sur une à deux semaines. OVH devra reconstruire les alimentations électriques des sites et vérifier les matériels réseau ainsi que les liaisons en fibre optique. Le plus important à retenir de cette première annonce d’Octave Klaba, c’est qu’il faudra plusieurs jours dans le meilleur des cas pour un retour à la normale.

MàJ le 10/03/2021 16:14 : le plan de retour à la normale commence à se dessiner, avec deux dates données par Octave Klaba. SBG1 et SBG4 doivent être relancés dès ce lundi 15 mars, date à laquelle le site sera à nouveau connecté au réseau internet d’OVH. Le retour de SBG3 est prévu pour le vendredi suivant, soit le 19 mars.

SBG2 ayant été détruit entièrement, il n’y a pas de date pour un éventuel retour. À la place, OVH a prévu de transférer tous ses clients sur ses centres de données de Roubaix et Gravelines. Dix mille serveurs seront ajoutés dans le mois à venir pour répondre à la demande et remplacer ce qui a disparu dans les flammes.

MàJ le 10/03/2021 20:24 : vous pouvez suivre le journal de l'intervention à cette adresse.


avatar YetOneOtherGit | 

@DG33

“Ceci dit ton ultracrépi tu nous le sers assez souvent...”

C’est un mot assez tendance certes mais il a l’avantage de bien résumer un des pans de l’effet Dunning-Kruger qui est un des maux du temps.

Donc j’évangélise 😛

Avec évidemment bien moins de talent que le grand Etienne Klein :

https://youtu.be/f89WVeqWe-M

avatar xDave | 

@benspx

Oh mais c'est si simple, il suffit pourtant d'appuyer sur un bouton. ;-)

Et après, quand tu vas discuter/négocier avec la direction pour une infra digne de ce nom et qu'on te dit que ça coûte trop cher, qu'on a jamais eu de problème, qu'il y aux disque dur dans le tiroir derrière l'assistant (véridique!) et patati et … patatras.

Vécu pas plus tard qu'il y a un an.
Et le site de se faire défoncer 15 jours après. 🙄 Et le con, dans sa tête pensait que c'était forcément de ma faute (ben oui j'ai évoqué le problème).

avatar IceWizard | 

@xDave

« 🙄 Et le con, dans sa tête pensait que c'était forcément de ma faute (ben oui j'ai évoqué le problème). »

Tuons le messager, c’est forcément de sa faute !

avatar DG33 | 

@sarayao

Tu digitalises tout ?
On va te mettre à l’index alors, car tu devrais numériser.
😉

avatar zoubi2 | 

@DG33

"Tu digitalises tout ? On va te mettre à l’index alors, car tu devrais numériser"

😂👍

avatar Calorifix | 

Ce n'est pas la faute d'OVH si vous n'avez pas mis en place des sauvegardes...

avatar byte_order | 

@sarayao
> Mon site pro est hébergé à Strasbourg, il est down… c’est vrai qu’à priori on se
> dit toujours que c’est rassurant d’héberger ses données en France …

Pourquoi, le feu est interdit dans les autres pays !?

avatar weagt | 

Je ne sais pas où mes services sont stockés, je suis chez Likuid qui normalement utilise les serveurs d'OVH pour les clients français. Ce matin tout fonctionne normalement...
Je ne sais pas si j'avais senti quelque chose mais j'ai justement téléchargé une sauvegarde complète hier.

avatar occam | 

Le cloud qui part en fumée...

avatar YetOneOtherGit | 

@occam

"Le cloud qui part en fumée..."

Ashes to ashes, dust to dust, if the women don't get you then the whiskey must

avatar occam | 

@YetOneOtherGit

Ce matin, c’est les data qui sont peated.

avatar YetOneOtherGit | 

@occam

"Le cloud"

Sauf erreur les activité Cloud d’OVH ne semblaient pas être hébergé dans ces bâtiments.

Juste de l’hébergement mutualisé ou dédié

avatar Nicolas Furno | 

@YetOneOtherGit

Non, il y a aussi des VPS et il me semble aussi du Public Cloud a Strasbourg.

Par contre, le mutu est à Gravelines désormais : https://www.ovh.com/fr/webhosting-migration/

avatar YetOneOtherGit | 

@nicolasf

"Non, il y a aussi des VPS et il me semble aussi du Public Cloud a Strasbourg. "

Merci pour l’information 🙏

avatar YetOneOtherGit | 

@nicolasf

"il y a aussi des VPS"

Sur le VPS ils en étaient où en terme d’engagement de continuité de service sur leurs offres ?

avatar Nicolas Furno | 

@YetOneOtherGit

Ça dépend des gammes, mais sur les VPS c’est 99,9 %. https://www.ovhcloud.com/fr/vps/

avatar YetOneOtherGit | 

@nicolasf

"Ça dépend des gammes, mais sur les VPS c’est 99,9 %. https://www.ovhcloud.com/fr/vps/"

Le post-mortem de l’incident sera donc intéressant à analyser 😋

Et merci d’avoir fait un effort de recherche à ma place, honte à moi 🤗🙏

avatar occam | 

@YetOneOtherGit

"Et merci d’avoir fait un effort de recherche à ma place"

J’ai attendu 24h avant de poster cette réplique, et je ne le fais que pour future référence, car il s’agit d’un aparté qui n’apporte rien au débat général, ne concernant en premier lieu que nous deux.

Quand je balance comme ça une sentence d’une ligne, alors que mon ordinaire est plus épais, c’est que j’ai fait mes recherches en amont, et que je crois pouvoir resserrer le résumé.
Un de ces jours, je devrais le faire en latin, quatre mots suffiraient.

Pour l’anecdote, un projet HPC que j’ai migré sur Azure pour un client il y a quelques mois serait sans doute fortement incapacité sinon carrément flambé, s’il était demeuré à Strasbourg. Depuis hier, son budget de sauvegarde délocalisée a été triplé, sans aucune intervention de ma part...

avatar YetOneOtherGit | 

@occam

“Depuis hier, son budget de sauvegarde délocalisée a été triplé, sans aucune intervention de ma part...”

😃👍😛

avatar KuhFgug | 

Ils ont frit, ils ont tout compris.

avatar pocketalex | 

il y a d'excellentes blagues dans ces commentaires, mais le tient est celui qui m'a le plus fait marrer

avatar zoubi2 | 

@KuhFgug

"Ils ont frit, ils ont tout compris"

😂😂👍

avatar ipadloic@me.com | 

@KuhFgug

👍😀

avatar cham | 

Perso quand j’ai perdu un document, j’appelle la NSA ils ont toujours une copie 😅

avatar YetOneOtherGit | 

@cham

"Perso quand j’ai perdu un document, j’appelle la NSA ils ont toujours une copie 😅"

https://www.lemonde.fr/blog/vidberg/files/2013/06/161_surveillance.gif

😉

avatar lmouillart | 

C'est malheureusement ce qui arrive quand on essaye de se prendre pour l’Amazonie, plutôt que l'Amazon.
Courage à eux. :/

avatar pocketalex | 

@lmouillart

alors eux je ne m'en fait pas trop. C'est un coup dur, mais j'imagine qu'ils ont des assurances, etc, et une capacité financière pour repartir vite

je me fais plus de soucis pour les nombreuses entreprises qui utilisaient ce data center, je ne suis pas sur que 100% des clients aient assurés leurs arrières...

avatar IceWizard | 

@pocketalex

« je me fais plus de soucis pour les nombreuses entreprises qui utilisaient ce data center, je ne suis pas sur que 100% des clients aient assurés leurs arrières... »

Plus haut dans le fil, j’ai parlé du jeu online Rust qui semble avoir perdu toutes les données des joueurs (personnages, équipements, scores, etc ..). Si c’est vrai le directeur technique doit passer une très mauvaise journée en ce moment, de même que l’éditeur du jeu !

avatar oomu | 

?

ce n'est qu'un incendie hein.

les Amazoniens aussi ont eu des déboires.

avatar kafy28 | 

Je ne serai pas surpris d’apprendre que les données des clients sont mirrorées sur deux data center du même site .....
La question est combien de données perdues ?

avatar oomu | 

pourquoi vous ne seriez pas surpris ? c'est absurde.

Déjà, c'est au client de payer pour une telle fonctionnalité de miroir (par exemple, moi je ne l'ai pas fait, bye bye mon serveur... bah j'ai mes copies dans mon ordi perso)

Ensuite, OVH détaille ses services. Vous pouvez voir ce qu'il en est plutôt que de ne pas être surpris. La surprise c'est le MAL !

avatar Ibiscus | 

Je ne comprends pas l'échec de leur protection incendie (alarme en tout genre, gaz Halon, etc..) évidement cela coute cher ! On écrit que le personnel présent a juste eu le temps de sortir, donc propagation du feu extrêmement rapide.
Évidement ces protections protègent d'un départ de feu, disons, normal, mais pas d'un attentat. Or il se trouve qu'on a en France et ce moment des "activistes se réclamant de l'écologie et de la décroissance" qui mettent le feu régulièrement à des pylônes 4G/5G TDF Orange et autres...
70 relais Hertziens détruits en 2020 et pas beaucoup d'individus interpellés
https://www.europe1.fr/societe/information-europe-1-linquietant-boom-des-destructions-dantennes-relais-4019048
Est-ce dans la continuité de ces actions terroristes pour OVH ?

avatar oomu | 

- les incendies arrivent, et cela malgré les protections incendies, qui fonctionnent dans la plupart des cas (on n'est pas au courant du coup de ces cas là) sauf le jour où ben c'est po le cas.

- nous n'avons pas d'information, on est pas sur place (moi en tout cas, et je pense vous aussi), on est pas employé OVH ni Pompier (on m'a pas envoyé le détail, les impudents), bref : on est pas chargé du dossier nous n'avons pas d'informations.

MAIS nous savons que les Rayons Lasers sont possibles et que théoriquement les Aliens de l'Espace pourraient exister. Peut être ce donc une attaque Alien Ciblée sur les infrastructures ?

Bref, POURQUOI voulez vous Spéculer ? Pourquoi voulez vous DEJA proposer VOTRE explication, VOTRE idée, VOTRE proposition ?

En l'absence de quoi que ce soit ni d'être chargé de l'enquête, pourquoi vous voulez tant que ça déjà deviner ?

vous ne pouvez pas.

Les Martiens, les Ecocolos, les ZActiviste, les Terroristes Pingouins, l'admin sys licencié qui a placé une bombe logique, le plombier zingueur, le pompier pyromane, l'arnaqueur à l'assurance, les hommes-taupes qui visent le serveur du Oomu (sérieux: il fait parti des perdus) , TOUT est POSSIBLE !

Mais on en sait rien donc on NE peut PAS spéculer: vous n'avez aucun élément le permettant pour l'instant.

avatar raoolito | 

@oomu

Vous dites n’importe quoi
Ce sont les Sub humains qui sont dans le coup ✊

avatar YetOneOtherGit | 

@oomu

"Bref, POURQUOI voulez vous Spéculer ? Pourquoi voulez vous DEJA proposer VOTRE explication, VOTRE idée, VOTRE proposition ?"

Sign’O the times 🥺

avatar IceWizard | 

@oomu

« MAIS nous savons que les Rayons Lasers sont possibles et que théoriquement les Aliens de l'Espace pourraient exister. Peut être ce donc une attaque Alien Ciblée sur les infrastructures ? »

C’est peu probable, toutes les recherches astronomiques de ces dernières années montrent que les aliens, s’ils existent sont très loin d’ici. Il est vraisemblable que nous sommes la seule forme d’intelligence dans la galaxie (désolé Kirk !).

Je pense plutôt à une attaque par laser venue de l’an 3754, via un trou de ver temporel, pour modifier le cours de l’histoire ! Peut-être les mêmes activistes qui ont modifiés le tirage de l’Euromillions de la semaine dernière, que j’aurais du gagner !!

avatar YetOneOtherGit | 

@IceWizard

"que les aliens, s’ils existent sont très loin d’ici"

Nope, il est de notoriété publique qu’ils sont hongrois et que leur représentant le plus connu est John von Neumann à qui nous devons tant 🤗👀🧠

avatar zoubi2 | 

@YetOneOtherGit

"il est de notoriété publique qu’ils sont hongrois et que leur représentant le plus connu est John von Neumann"

Je proteste. À vue de nez, la notoriété de von Neumann doit égaler celle de Bela Bartok, c'est dire... Je pencherais plutôt pour Franz Liszt.

Nan, le plus grand, le plus célèbre des Hongrois c'est évidemment Viktor Orban 😱

avatar YetOneOtherGit | 

@zoubi2

"Je proteste. À vue de nez, la notoriété de von Neumann doit égaler celle de Bela Bartok, c'est dire... Je pencherais plutôt pour Franz Liszt."

C’était une blague très en vogue dans le milieu scientifique après la déferlante de grands esprits hongrois aux USA dont le plus impressionnant était évidemment l’immense von Neumann 😉

avatar YetOneOtherGit | 

@zoubi2

"la notoriété de von Neumann doit égaler celle de Bela Bartok"

On parle de notoriété chez les honnêtes Hommes pas chez les incultes 🤓

avatar raoolito | 

@IceWizard

«  C’est peu probable, toutes les recherches astronomiques de ces dernières années montrent que les aliens, s’ils existent sont très loin d’ici. Il est vraisemblable que nous sommes la seule forme d’intelligence dans la galaxie (désolé Kirk !). »

who purée, je me lancerais pas là-dedans. C’est meme certain qu’il y en a dans la galaxie, de par le nombre d’etoiles et le fait que les systemes avec exoplanetes sont la majorité.

«  Je pense plutôt à une attaque par laser venue de l’an 3754, via un trou de ver temporel, pour modifier le cours de l’histoire ! Peut-être les mêmes activistes qui ont modifiés le tirage de l’Euromillions de la semaine dernière, que j’aurais du gagner !! »

oui là par contre je veux bien y croire. Mais des trucs credibles quoi, pas des infox enormes !

avatar YetOneOtherGit | 

@raoolito

"C’est meme certain qu’il y en a dans la galaxie, de par le nombre d’etoiles et le fait que les systemes avec exoplanetes sont la majorité.
"

Je croyais que tu ne voulais pas te lancer la dessus et tu enchaîne par un très douteux “c’est même certain”

C’est très loin d’être certain 😎

avatar jul69 | 

Travaillant dans le domaine, j’ai vu des clients qui étaient sur le cloud de Microsoft (Azure) avoir leur serveurs coupés quand les réseaux étaient saturés au début de la crise COVID. Tout est simplement une question de niveau de service.

avatar vince29 | 

Impressionnant
C'est cuit cuit
Comme dirait twitter

avatar weagt | 

Ils avaient un problème de firewall...

avatar DG33 | 

@weagt

Putain de cigarette mal éteinte...

avatar mk3d | 

Je m’étonne qu’un bâtiment normalement régis par des normes puisse brûler ainsi. OVH aurait-il lésiné sur la sécurité au bénéfice du bénéfice?..
Je plains les IT qui ont vu leur infra tomber. Ça doit courir sec chez beaucoup de clients hébergés. Courage à eux.

avatar fred5150 | 

tout de même étrange qd on connaît le sécurité des bâtiments aux incendies....étrange étrange qd même

avatar Insomnia | 

En fait la sauvegarde ou la réouverture d’un site en cas de problème sur le serveur du client dépends du prix payer, sauvegarder les données vers le même site serait pas bon pour eux. Reste que pour réinitialiser le tout suffit pas de cliquer sur un simple bouton.

avatar loupsolitaire97 | 

BFM Business qui titre la même news d’une manière bien putaclic.
La différence entre le bon et le mauvais journalisme.

Pages

CONNEXION UTILISATEUR