rssLink RSS for all categories
 
icon_red
icon_green
icon_red
icon_blue
icon_red
icon_green
icon_green
icon_orange
icon_red
icon_red
icon_green
icon_green
icon_green
icon_orange
icon_green
icon_green
icon_green
icon_blue
icon_red
icon_red
icon_green
icon_red
icon_green
icon_blue
icon_orange
icon_blue
icon_green
icon_green
icon_green
icon_green
icon_orange
icon_red
icon_green
icon_green
icon_green
icon_green
 

FS#49484 — Datacenter SBG

Attached to Project— Datacenters
Incident
Strasbourg
CLOSED
100%
Nous faisons actuellement face à un incident majeur au sein de notre datacentre de Strasbourg, avec un feu déclaré dans le bâtiment SBG2.
Les pompiers sont intervenus immédiatement sur place mais ne sont pas parvenus à contrôler l’incendie de SBG2.
Par mesure de précaution, l’électricité a été coupée sur l’ensemble du site, ce qui impacte tous nos services à SBG1, SBG2, SBG3 et SBG4.
Si votre production est à Strasbourg, nous vous recommandons d’activer votre Plan de Reprise d’Activité.
Toutes nos équipes sont mobilisées aux côtés des pompiers.
Nous vous tiendrons informés à ce sujet dès que nous aurons davantage d’éléments.

--

We are currently facing a major incident in our DataCenter of Strasbourg with a fire declared in the building SBG2.
Firefighters were immediately on the scene but could not control the fire in SBG2.
The whole site has been isolated, which impacts all our services on SBG1, SBG2, SBG3 and SBG4.
If your production is in Strasbourg, we recommend to activate your Disaster Recovery Plan.
All our teams are fully mobilized along with the firefighters.
We will keep you updated as more information becomes available.
Date:  Friday, 30 July 2021, 16:40PM
Reason for closing:  Done
Comment by OVH - Wednesday, 10 March 2021, 13:31PM

Incendie sur notre site de Strasbourg

Ce mercredi 10 mars 2021, à 00h47, un incendie s’est déclaré dans une salle d’un de nos 4 datacentres strasbourgeois, SBG2. Nous précisons que le site ne fait pas l’objet d’une classification seveso.
Les pompiers sont immédiatement intervenus sur site afin de protéger les équipes et limiter la progression de l’incendie. Ils ont ainsi procédé à l’isolation complète du site et de son périmètre dès 2h54.
À 4h09, le feu a détruit SBG2 et continuait de présenter des risques pour les datacentres voisins jusqu'à ce que les pompiers prennent le contrôle complet de l’incendie. Depuis 5h30, le site est inaccessible à nos équipes pour des raisons évidentes de sécurité, sous le pilotage de la préfecture.
L’incendie est désormais circonscrit.
Nous sommes soulagés qu’aucun blessé ne soit à déplorer, ni parmi nos équipes ni parmi les pompiers et les services de la préfecture que nous remercions pour leur mobilisation exemplaire à nos côtés.

Grâce à notre parc opérationnel de 15 datacentres en Europe, nos équipes techniques et commerciales sont pleinement investies pour accompagner nos clients, mettre en oeuvre des solutions et pallier l’indisponibilité de notre site strasbourgeois.

Notre mission est d’offrir à nos clients une qualité de services optimale pour accompagner leurs activités en ligne et nous savons l’importance cruciale que cela revêt pour eux. Nous leur présentons nos plus sincères excuses pour les difficultés que cet incendie leur cause. Nous nous engageons ainsi à communiquer avec la plus grande transparence sur ses causes et ses impacts.
Nous sommes actuellement en train d’évaluer l’impact de cet incident et communiquerons dès que possible avec la plus grande transparence sur l’avancée de nos analyses et la mise en œuvre de solutions.

État du datacenter de Strasbourg
SBG1 : Salle Network est OK - 4 salles détruites - 8 salles OK
SBG2 : détruite
SBG3 : PSU éteint - contrôle des serveurs en cours
SBG4 : Pas d'impact physique

Pas de redémarrage aujourd'hui de SBG1,SBG3 et SBG4

Plan pour les 2 prochaines semaines:
1)Remise en service de 20KV pour SBG3
2)Remise en service de 240V in SBG1/SBG4
3)Contrôle des DWDM/routers/switchs dans la salle réseau A (SBG1).
Contrôile des fibres de la liaison Paris/Frankfurt
4)Reconstruction de la salle réseau B (SBG5) Contrôle des fibres de la liaison Paris/Frankfurt

Nous vous tiendrons informés de l'évolution de la situation.
--

Fire at Our Strasbourg Site

At 00:47 on Wednesday, March 10, 2021, a fire broke out in a room in one of our 4 datacenters in Strasbourg, SBG2. Please note that the site is not classified as a Seveso site.
Firefighters immediately intervened to protect our teams and prevent the spread of the fire. At 2:54 am they isolated the site and closed off its perimeter.
By 4:09 am, the fire had destroyed SBG2 and continued to present risks to the nearby datacenters until the fire brigade brought the fire under control.
From 5:30 am, the site has been unavailable to our teams for obvious security reasons, under the direction of the prefecture. The fire is now contained.

We are relieved that no one was injured, neither among our teams nor among the firefighters and the services of the prefecture, whom we thank for their exemplary mobilization at our side.

With our 15 datacenters in Europe, our technical and commercial teams are fully invested to support our customers, implement solutions and mitigate the impact of the unavailability of our Strasbourg site. Our mission is to provide our customers with the highest quality of services to support their online activities and we know how important this is to them. We sincerely apologize for the difficulties and challenges caused by this fire. We are committed to continue to communicate with the greatest transparency about the cause of the fire and its consequences.
We are currently assessing the impact of this incident and will communicate as transparently as possible on the progress of our analyses and the implementation of solutions.

Status of Strasbourg Datacenter
SBG1 : Network Room is OK - 4 room destroyed - 8 Rooms OK
SBG2 : Destroyed
SBG3 : UPS Down - Check server still in progress
SBG4 : No physical impact

No restart today for SBG1,SBG3 and SBG4

Plan for the next 2 weeks:
1)Rebuilding 20KV for SBG3
2)Rebuilding 240V in SBG1/SBG4
3)Verifying DWDM/routers/switchs in the network room A (SBG1).
Checking the fibers Paris/Frankfurt
4)Rebuilding the network room B (SBG5) cheking fiber Paris/Frankfurt

We will keep you updated as the situation evolves.


Comment by OVH - Wednesday, 10 March 2021, 17:26PM

OVH's technical teams are preparing and shipping the equipment needed to set up a temporary network room. This equipment will be sent to the Strasbourg datacenter during the night.
The site's fiber have been checked and were not affected by the fire.
The restoration of the site's power supply of SBG1 and SBG4 is estimated for Monday, March 15. A recovery for SBG3 is estimated for Friday, March 19

---

Les équipes techniques d'OVH préparent et expédient le matériel nécessaire à la mise en place d'une salle réseau temporaire. Ces équipements vont être envoyés sur le datacenter de Strasbourg durant la nuit.
Les arrivées fibre du site ont été controlées et n'ont pas été touchées par l'incendie.
Le rétablissement de l’alimentation électrique du site de SBG1 et SBG4 est estimé au lundi 15 Mars. Un rétablissement de SBG3 est estimée au vendredi 19 mars


Comment by OVH - Wednesday, 10 March 2021, 21:03PM

OVH technical teams are doing their best to get the Strasbourg site back up and running. A next update is scheduled for tomorrow, Thursday March 11 at 10:30 am.
---
Les équipes techniques d'OVH font leur maximum pour la remise en marche du site de Strasbourg. Un prochain point d'étape est prévu demain jeudi 11 mars à 10h30.


Comment by OVH - Wednesday, 10 March 2021, 23:16PM

Summary:
• At 00:47 on Wednesday 10 March 2021, a fire broke out in a room at one of our four
OVHcloud datacentres in Strasbourg (SBG2).
• The fire was contained by the early hours of the morning.
• There are no injuries.
• The fire mostly destroyed the SBG2 datacentre and partially damaged the SBG1
datacentre (4 of the 12 rooms destroyed). The two other OVHcloud datacentres in
Strasbourg were not affected by the fire; the SBG3 and SBG4 servers are currently
switched off but undamaged.
• The site is not classified as a Seveso site.
• The cause of the fire has yet to be established and an investigation has been launched as
mandated by the authorities.

Actions taken by OVHcloud:
• The technical and commercial teams have been working since this morning to inform our
customers and handle the unavailability of our Strasbourg site.
• The company’s founder, Octave Klaba, has been on site since this morning with the
industrial and technical teams.
To follow updates to this situation in real time:
Twitter: https://twitter.com/ovhcloud
• A customer announcement, along with an FAQ, will be available tomorrow morning.
• To help us handle customer requests, we recommend using the ticket feature on our
website or consulting our help centre.

Our three priorities are as follows:
1. Reserve infrastructures at our other datacentres for our affected customers: we
have a stock of new servers at the Roubaix and Gravelines sites, ready to be delivered to
the majority of affected customers. We will further enhance availability in these
datacentres, with the production of nearly 10,000 new servers in the coming weeks.
Affected customers will be notified about this process as soon as possible.
2. Secure the site now that we have regained access, clean it up, and reconnect the
electricity and the network for the three affected datacentres.
3. Continue to assess the impact on our customers’ servers at the affected
datacentres, in order to find the best solutions.
We are doing everything we can to ensure a continuity of service to our customers:
• We are working on a plan to relaunch the three unaffected datacentres (SBG3 and SBG4),
the partially affected datacentre (SBG1), as well as our network, as quickly as possible.
• We ask that our customers exercise caution around the emails they receive: in times of
crisis, it is common for malicious activity (phishing, spam, etc.) to increase. It is more
important than ever to stay alert.
Impact on our operation:
• We are continuing to assess the impact of this incident, particularly for the customers
whose data was located in the datacentre destroyed by the fire.
• Our Web-based VOIP services in France were not affected.
• All of our services in our other France-based datacentres and across the world (including
15 datacentres in Europe) are fully operational.

Our mission is to provide our customers with the highest quality of services to support their
online activities and we know how important this is to them. We sincerely apologise for the
issues caused by this fire. We will continue to communicate with the greatest transparency
about the cause of the fire and its consequences.

We are assessing the environmental impact by working with the relevant authorities on a
procedure to confirm that no pollution was caused.

At this stage, we can confirm that the local residents are not at any risk.

We are continuously assessing the impact of this incident and will communicate as transparently
as possible on the progress of our analyses and the solutions to be implemented.

All of our communication channels, including our incident tracking platform, can be accessed so
that you can stay informed of developments in real time.

----

Rappel des faits :
• Un incendie s’est déclaré ce mercredi 10 mars 2021 à 00h47 dans une salle d’un des
4 datacentres d’OVHcloud situés à Strasbourg (appelé SBG2).
• L’incendie a été circonscrit en début de matinée.
• Il n’y a aucun blessé à déplorer.
• L’incendie a détruit principalement le datacentre SBG2 et a partiellement endommagé le
datacentre SBG1 (4 salles détruites sur 12). Les deux autres datacentres OVHcloud de
Strasbourg n’ont pas été touchés par le feu ; les serveurs SBG3 et SBG4 sont pour
l’instant éteints mais n’ont pas été impactés.
• Le site ne fait pas l’objet d’une classification Seveso.
• L’origine de cet incendie est en cours d’étude et une procédure d’investigation
mandatée par les autorités est lancée.

Les actions qu’OVHcloud a engagées :
• Les équipes techniques et commerciales sont mobilisées depuis ce matin pour informer
nos clients et pallier l’indisponibilité de notre site strasbourgeois.
• Octave Klaba, fondateur de l’entreprise, est sur place depuis ce matin avec les équipes
industrielles et techniques.
• Pour suivre en temps réel l’évolution de la situation :
Twitter : https://twitter.com/OVHcloud_FR
• Une communication client accompagnée d’une « FAQ » sera disponible dès demain.
• Afin de faciliter la prise en charge des demandes des clients, nous leur conseillons de
privilégier la création de tickets sur notre site ou de consulter notre centre d’aide.

Nos trois priorités sont les suivantes :
1. Réserver des infrastructures sur nos autres datacentres pour les clients impactés :
sur les sites de Roubaix et Gravelines, nous disposons d'un stock de nouveaux serveurs
prêts à être livrés auprès d'une majorité de clients impactés. Nous allons renforcer
encore la disponibilité dans ces datacentres avec la production de près de
10 000 nouveaux serveurs dans les prochaines semaines. La procédure sera
communiquée aux clients concernés dès que possible.
2. Sécuriser le site, auquel nous avons désormais accès, le nettoyer puis rétablir l’électricité
et le réseau pour les trois datacentres impactés.
3. Continuer à évaluer avec nos clients l’impact sur leurs services situés sur les
datacentres concernés afin de trouver les meilleures solutions.

Nous mettons tous les moyens en oeuvre pour assurer une continuité de services à nos
clients :
• Nous travaillons à un plan pour relancer les trois datacentres non touchés (SBG3 et
SBG4) ou partiellement touchés (SBG1), ainsi que notre réseau, le plus rapidement
possible.
• Nous invitons nos clients à rester attentifs aux e-mails reçus : en période de crise, il est
courant que les tentatives malveillantes (phishing, spam, sollicitation, etc.) se multiplient.
Il est plus que jamais nécessaire de rester vigilants.

L’impact sur nos activités :
• Nous continuons d’évaluer l’impact de cet incident, notamment pour les clients dont les
données étaient situées dans notre datacentre détruit par l’incendie.
• Nos services Web VOIP en France n’ont pas été impactés.
• L’ensemble de nos services dans les autres datacentres en France et dans le monde (dont
15 DC en Europe) sont pleinement opérationnels.

Notre mission est d’offrir à nos clients une qualité de services optimale pour accompagner leurs
activités en ligne et nous savons l’importance cruciale que cela revêt pour eux. Nous leur
présentons nos plus sincères excuses pour les difficultés que cet incendie leur cause. Nous nous
engageons ainsi à communiquer régulièrement avec la plus grande transparence sur les causes
et les impacts.

Nous évaluons l’impact environnemental en collaborant avec les autorités compétentes et en
suivant une procédure afin de confirmer l’absence de pollution.
À ce stade, nous pouvons confirmer que les riverains n’encourent aucun risque.

Nous évaluons de manière continue l’impact de cet incident et communiquerons dès que
possible avec la plus grande transparence sur l’avancée de nos analyses et la mise en oeuvre de
solutions.

Tous nos canaux de communication, à commencer par notre plateforme de suivi d’incidents,
sont accessibles pour vous tenir informés en temps réel sur l’évolution de la situation.


Comment by OVH - Thursday, 11 March 2021, 11:52AM

The first cleaning and securing works of the datacenter have started this morning.
Our teams are building a document summarizing the impacted services for each building. This document aims to give you visibility on the recovery status of your services and data in the coming days.
A FAQ will be available soon to determine the location of your products and answer your questions.

---

Les premiers travaux de nettoyage et sécurisation du datacenter ont débuté ce matin.
Nos équipes construisent un document synthétisant les services impactés pour chaque bâtiment. Ce document a pour objectif de vous donner de la visibilité sur l'état de récupération de vos services et données dans les prochains jours.
Une FAQ va être prochainement disponible afin de déterminer la localisation de vos produits et répondre à vos questions.


Comment by OVH - Thursday, 11 March 2021, 16:22PM

Current situation at 3:30pm CET

People :

• HR teams arrived on site today to support the teams.
• Additional industrial and technical teams arrived from other offices and datacenters to reinforce the on-site staff and provide specific expertise.
• Logistic and food services have been provided to all on-site teams.
• A temporary office has been established.
• We’ve reinforced the staff on the French production site (Croix) with internal volunteers to address the current production plan and additional workload caused by the Strasbourg incident.
• The production will be carried out in extended working hours and during the weekends.

Production and Datacenters :

• We’ve started to propose replacement infrastructure (Dedicated servers, Hosted Private Cloud, and Public Cloud) in Roubaix and Graveline datacenters to our customers.
• To address the demand, additional assembly lines will be in place in the next 48 hours. This will triple our production capacity.

On the Strasbourg site:
o Diagnostic and inventory currently in progress.
o We are in the process of clearing up and repairing the damaged buildings to guaranty the safe working environment for our teams.
o We have finished removing the extinguishing foam and water from the street. We will remove the water from the water tank today.

• SBG2 will need to be almost entirely reconstructed.
• SBG1 was heavily damaged.
o Following a preliminary audit, Network room SBG1 will be restored at the beginning of next week.
o The provisional date for restoring the power supply is Monday, March 15th.
o In the coming days, the servers will be activated room by room after the audit.
• SBG4: preliminary audits did not reveal issues. Our ambition now is to restore power during week 12 and then gradually reactivate all services.
• SBG3 was not impacted by the fire. We aim to restore the power and network during week 12 and then gradually reactivate all services.

Our three priorities remain as follows:

1. Reserve infrastructures at our other datacentres for our affected customers: we have a stock of new servers at the Roubaix and Gravelines sites, ready to be delivered to the majority of affected customers. We will further enhance availability in these datacentres, with the production of nearly 10,000 new servers in the coming weeks. Affected customers will be notified about this process as soon as possible.
2. Secure the site now that we have regained access, clean it up, and reconnect the electricity and the network for the three affected datacentres.
3. Continue to assess the impact on our customers’ servers at the affected datacentres, in order to find the best solutions and communicate to all customers

Additional actions taken by OVHcloud:

Network:
• All fiber paths that enter the datacenter site are operational.
• We have placed orders with different suppliers – due date for delivery on-site, March 11th.

Communication:
• Today we will send direct emails to all customer impacted.
• FAQ have been published: https://help.ovhcloud.com/en/faq/strasbourg-incident/
• To follow updates in real time:
o Our main communication tool remains «Tâche Travaux »
o Octave Klaba will publish a video in response to the situation.
o Octave Klaba’s account on Twitter @olesovhcom.
• An official statement will be released tomorrow March 12th.
• Twitter: https://twitter.com/ovhcloud

Our mission is to provide our customers with the highest quality of services to support their online activities and we know how important this is to them. We sincerely apologise for the issues caused by this fire. We will continue to communicate with the greatest transparency about the cause of the fire and its consequences.

An investigation is ongoing. Regardless of the cause of the incident, OVHcloud is currently evaluating the potential technical and operational measures aimed to bring solutions to the impacted customers.

---

Equipes :
• Nos équipes RH sont arrivées sur place aujourd'hui pour appuyer les équipes travaillant sur le site.
• Un bureau temporaire a été déployé sur-place.
• D'autres équipes industrielles et techniques OVHcloud, sont arrivées sur place en renfort et fournir une expertise spécifique.
• Nous avons renforcé le personnel sur le site de production français (Croix) par des volontaires internes, ceci, pour faire face au plan de production actuel ainsi qu’à la charge de travail supplémentaire causée par l’incident de Strasbourg.
• La production des serveurs se fera en heures de travail prolongées et pendant le week-end.

Production et Datacenters :
• Nous avons commencé à proposer à nos clients une infrastructure de remplacement (serveurs dédiés, Cloud privé et Cloud public) dans les Datacenters de Roubaix et Gravelines.
• Pour répondre à la demande, il est prévu de déployer des chaînes de montage supplémentaires au cours des 48H à venir pour multiplier par 3 notre capacité de production

Sur le site de Strasbourg :
• Diagnostic et inventaire en cours aujourd'hui
• Nettoyage et réparation des bâtiments endommagés en cours pour garantir un environnement de sécurité pour nos équipes.
• Le nettoyage de la mousse et l'aspiration de l'eau dans la rue sont faits. L'aspiration du réservoir d'eau est prévue aujourd'hui.

• SBG2 doit être presque entièrement reconstruit.
• SBG1 a été lourdement endommagé.
o Salle de réseau SBG1 - Salle conservée à la suite de la vérification préliminaire ETA : début de la semaine prochaine)
o ETA provisoire pour électrique = lundi 15 mars
o Les jours suivants, les serveurs seront activés pièce par pièce après audit
• Pour SBG4 : les vérifications préliminaires et ne révèlent aucun problème. L'objectif est maintenant de rétablir l’électricité en semaine 12 et de rétablir progressivement tous les services.
• SBG3 non touché par l'incendie. L’objectif est de rétablir le courant et le réseau semaine 12 et de restaurer progressivement tous les services

Nos trois priorités sont les suivantes :

1. Réserver des infrastructures sur nos autres datacentres pour les clients impactés : sur les sites de Roubaix et Gravelines, nous disposons d'un stock de nouveaux serveurs prêts à être livrés auprès d'une majorité de clients impactés. Nous allons renforcer encore la disponibilité dans ces datacentres avec la production de près de 10 000 nouveaux serveurs dans les prochaines semaines. La procédure sera communiquée aux clients concernés dès que possible.

2. Sécuriser le site, auquel nous avons désormais accès, le nettoyer puis rétablir l’électricité et le réseau pour les trois datacentres impactés.

3. Continuer à évaluer avec nos clients l’impact sur leurs services situés sur les datacentres concernés afin de trouver les meilleures solutions.

Actions supplémentaires entreprises par OVHcloud :

Réseau :
• Toutes les connections « fibres » entrantes dans le Datacenter sont OK.
• Toutes les commandes passées auprès de différents fournisseurs - ETA à recevoir sur place le 11 mars.

Communication :
• Des courriels directs seront envoyés dès aujourd'hui à tous les clients concernés
• FAQ publiée https://help.ovhcloud.com/fr/faq/incendie-strasbourg/
• Suivre les mises à jour de cette situation en temps réel :
o Notre principal outil de communication reste "Tâche Travaux "
o Une vidéo de mise à jour sur la situation par Octave Klaba sera publiée
o Compte d’Octave Klaba sur Twitter https://twitter.com/olesovhcom
• Une mise à jour de la situation sera publiée demain, le 12 mars.
• Twitter : https://twitter.com/ovhcloud_fr

Notre mission est de fournir à nos clients la plus haute qualité de services pour soutenir leurs activités en ligne et nous savons combien cela est important pour eux. Nous nous excusons sincèrement pour les problèmes causés par cet incendie. Nous continuerons à communiquer avec la plus grande transparence sur la cause de l'incendie et ses conséquences.

Une enquête est en cours. Quelle que soit la cause de l'incident, OVHcloud évalue actuellement les mesures techniques et opérationnelles potentielles visant à apporter des solutions aux clients touchés.

Tous nos canaux de communication, à commencer par notre plateforme de suivi d’incidents, sont accessibles pour vous tenir informés en temps réel sur l’évolution de la situation.


Comment by OVH - Friday, 12 March 2021, 15:15PM

Customer Information:
• Octave Klaba, founder of OVHcloud, has uploaded videos providing information about the situation.
FR: https://twitter.com/olesovhcom/status/1370045226929299461
EN: https://twitter.com/olesovhcom/status/1370045891806175232
• Today, we will inform our customers by email about the status of their services. We also have a 24/7 support team in place to support them.

As a reminder, our three priorities are as follows:

• Priority 1: restoring services to SBG1,SBG3, and SBG4
• Priority 2: providing our customers with infrastructures in our non-affected datacentres
• Priority 3: Implementation of all DRP (Disaster Recovery Plan) mechanisms with our customers.

Priority 1: restoring services to SBG1, SBG3 and SBG4
• Diagnostics and inventory are ongoing.
• To guarantee the safety of our teams, cleaning and repairs to the damaged buildings are in progress.
• The tasks of cleaning the foam and the removal of water on the public road have been carried out. The supply tank of the hydraulic system has been drained.
• All long-distance fibre connections are operational.

• SBG1 was partially damaged (4 out of 12 rooms):
o The network room was checked yesterday. An isolated electrical test run, without connectivity, is planned for this weekend. We estimate an orderly restart of connectivity early next week.
o Reactivation of the electrical network is tentatively planned for Monday, 15 March.
o Servers will be audited and reactivated one by one.
• SBG3 was spared from the fire
o A network room will be set up by the end of this week, in order to be operational at the beginning of the week of 15 March.
o Tests for the high voltage power supply will be carried out this weekend. Provisional estimate for the reestablishment of power: Monday, March 15.
o A progressive restart of all services is estimated beginning Monday, 22 March.

• SBG4 was spared from the fire
o We will finalise our service reactivation plan by the end of this week.

All affected Email Pro services began being restored on Thursday, March 11, starting at 4:55 p.m. No email was lost.

Priority 2: providing our customers with infrastructures in our non-affected datacentres.

• For customers that have been impacted, we are offering replacement infrastructures (Bare Metal, Hosted Private Cloud and Public Cloud) in our Roubaix (RBX) and Gravelines (GRA) datacentres.
• We have already delivered to our impacted customers:
o Wednesday 10 March: 2100 new servers.
o Thursday, 11 March: 630 new servers.
• The new organisation of our assembly lines has been operational since the morning of Friday, 12 March and has tripled our production capacity (3,000 to 4,000 servers per week).
• We are committed to producing nearly 15,000 new servers in the coming weeks.
• Delivery times for the new services will be communicated as soon as possible.

Priority 3: Implementation of all DRP (Disaster Recovery Plan) mechanisms with our customers.
• By the end of the week, our support teams and Technical Account Managers will define a support plan for our customers which have not yet activated their DRP.

Communications
• FAQs are available at the following link: https://help.ovhcloud.com/en-gb/faq/strasbourg-incident/
• To follow updates about this situation in real time:
o Our main communication tool remains "Task Status "
o Status videos are available here:
- FR: https://twitter.com/olesovhcom/status/1370045226929299461

- EN: https://twitter.com/olesovhcom/status/1370045891806175232

o Octave Klaba’s Twitter account: https://twitter.com/olesovhcom
o OVHcloud Twitter: https://twitter.com/ovhcloud_fr

Our mission remains to provide our customers with the highest quality of service and to support their online business and we know how important this is to them. We sincerely apologise for the problems caused by this fire. We will continue to communicate with the utmost transparency about the cause of the fire and its consequences.

An investigation is ongoing. Whatever the cause of the incident, OVHcloud is currently evaluating potential technical and operational measures to bring solutions to all affected customers.

All of our communication channels, including our incident tracking platform, can be accessed so that you can stay informed of developments in real time.

---

Information clients :
• Des vidéos de statut sur la situation ont été mises en ligne par Octave Klaba, fondateur d’OVHcloud :
FR : https://twitter.com/olesovhcom/status/1370045226929299461
EN : https://twitter.com/olesovhcom/status/1370045891806175232
• Nous planifions ce jour, d’informer chacun des clients impactés sur le statut de leurs services et nous avons également mis en place une équipe d’assistance 24/7 pour accompagner tous nos clients impactés.

Pour rappel, nos trois priorités sont :

• Priorité 1 : rétablissement des services sur SBG1-SBG3-SBG4
• Priorité 2 : mise à disposition de nos clients des infrastructures sur nos datacentres non impactés
• Priorité 3 : mise en oeuvre avec nos clients de tous les mécanismes de PRA (Plan de Reprise d’Activité).

Priorité 1 rétablisement des services sur SBG1- SBG3:
• Le diagnostic et l’inventaire se poursuivent.
• Le nettoyage et la réparation des bâtiments endommagés, sont en cours pour garantir la sécurité de nos équipes.
• Le nettoyage de la mousse et l'aspiration de l'eau sur la voie publique ont été réalisés. Le réservoir d’alimentation du circuit hydraulique a été purgé.
• Toutes les connections « fibres » réseau longue distance sont opérationnelles

• SBG1 a été partiellement endommagé (4 salles sur 12):
o Salle réseau – contrôlée hier - ETA du redémarrage : début de semaine prochaine.
o Réseau électrique - ETA provisoire pour remise en route : lundi 15 mars.
o Les serveurs seront audités et réactivés un par un.

• SBG3 :
o Epargné par l’incendie.
o Une salle réseau sera mise en place pendant le week-end pour être opérationnelle début de la semaine du 15 mars.
o Des tests pour l’alimentation de la haute tension seront effectués ce week-end.
o Redémarrage progressif de tous les services estimé à partir du lundi 22 Mars.

• SBG 4 : n’est pas impacté.
o Un plan de mise en service sera défini pour la fin de cette semaine

Priorité 2 : mettre à disposition de nos clients des infrastructures sur nos datacentres non impactés

• Nous proposons aux clients impactés une infrastructure de remplacement (Bare Metal, Hosted Private Cloud et Public Cloud) dans les datacenters de Roubaix (RBX) et Gravelines (GRA).
• Nous avons déjà livré à nos clients impactés :
o Mercredi 10 mars: 2100 nouveaux serveurs
o Jeudi 11 mars: 630 nouveaux serveurs
• La nouvelle organisation de nos chaînes de montage est opérationnelle depuis vendredi 12 mars au matin et permet un triplement de capacité de production (3000 à 4000 serveurs par semaine).
• Nous nous engageons à produire près de 15 000 nouveaux serveurs dans les prochaines semaines.
• Les délais de livraison des nouveaux services seront communiqués dès que possible.

Priorité 3 : mettre en oeuvre avec nos clients tous les mécanismes de PRA (Plan de Reprise d’Activité).
• Nos équipes du support et les Technical Account Managers vont définir pour la fin de semaine un plan d’assitance pour nos clients qui n’ont pas encore activé leur PRA.

Communication :
• La FAQs disponible : https://help.ovhcloud.com/fr/faq/incendie-strasbourg/
• Pour suivre l’évolution de la situation en temps réel :
o Notre principal outil de communication reste "Tâche Travaux "
o Des vidéos de statut disponibles ici :
- FR : https://twitter.com/olesovhcom/status/1370045226929299461

- EN : https://twitter.com/olesovhcom/status/1370045891806175232

o Compte d’Octave Klaba sur Twitter https://twitter.com/olesovhcom
o OVHcloud sur Twitter : https://twitter.com/ovhcloud_fr

Notre mission est de fournir à nos clients la plus haute qualité de services pour soutenir leurs activités en ligne et nous savons combien cela est important pour eux. Nous nous excusons sincèrement pour les problèmes causés par cet incendie. Nous continuerons à communiquer avec la plus grande transparence sur la cause de l'incendie et ses conséquences.

Une enquête est en cours. Quelle que soit la cause de l'incident, OVHcloud évalue actuellement les mesures techniques et opérationnelles potentielles visant à apporter des solutions aux clients touchés.

Tous nos canaux de communication, à commencer par notre plateforme de suivi d’incidents, sont accessibles pour vous tenir informés en temps réel sur l’évolution de la situation.


Comment by OVH - Friday, 12 March 2021, 15:15PM

Following the fire in the Strasbourg datacenter, we have frozen all maintenance operations in our datacenters since Wednesday, March 10 until further notice. Once the situation is stabilized, we will communicate on the resumption of operations.

• An email will be sent today to each customer with their specific situation and the options available.

For any service needs, we invite you to use the resources of the Roubaix(RBX) and Graveline(GRA) datacenters.

---
Suite à l'incendie du datacenter de Strasbourg, nous avons gelé depuis le mercredi 10 mars toute opération de maintenance de nos datacenter jusqu'à nouvel ordre. Une fois la situation stabilisée, nous communiquerons sur la reprise des opérations.

• Un email va être envoyé aujourd'hui à chaque client avec sa situation spécifique et les options à disposition.

Pour tout besoin en service, nous vous invitons à utiliser les ressources des datacenter de Roubaix(RBX) et Graveline(GRA).


Comment by OVH - Saturday, 13 March 2021, 18:10PM

Customer information:

1 - Server Status
• We have sent emails to all our customers informing them of the status of their services.

2 - Commercial actions
• Billing has been suspended for Strasbourg (SBG) datacentre customers from the date of the incident.
• Commercial measures have been set out to each affected customer.
• Details on how these measures will be implemented will be sent next week, and will apply in particular to March bills for impacted services that were already issued before 10 March.
• We have updated the FAQs.

Our three priorities are as follows:

• Priority 1: restoring services to SBG1,SBG3, and SBG4
• Priority 2: providing infrastructures in other datacentres for our affected customers
• Priority 3: Implementing all DRP (Disaster Recovery Plan) mechanisms with our customers

Action plan:

Priority #1:

• Status summary for each datacentre

SBG-1
- Situation : 4 of 12 rooms were damaged
- Electrical restart : From Monday 15 March
- Server restart : Progressive restoration of undamaged servers by 22 March

SBG-2
- Situation : Building out of use
- Electrical restart : Audit and inventory of premises
- Server restart : Replacing infrastructures in other datacentres

SBG-3
- Situation : Servers undamaged
- Electrical restart : Tests for the high voltage supply will be carried out this weekend. Provisional restart on 15 March
- Server restart : A progressive restart of all services is estimated from Monday, 22 March.

SBG-4
- Situation : Servers undamaged
- Electrical restart : Scheduled for Monday 15 March
- Server restart : A progressive restart of all services is estimated from Monday, 22 March.

• Mobile high-voltage network and electricity units arrived at the Strasbourg site today at 12pm.
• 60 experts are currently working on site (in rotation over the weekend) in four teams, with the following missions:

1. Team 1 (network) is tasked with connecting the mobile network unit and testing the network room in SBG1
2. Team 2 (electricity) is working on high-voltage electricity connections
3. Team 3 (electricity) is working on low-voltage electricity connections
4. Team 4 is working on protecting and restoring the cooling systems

The aim is to reconnect, repower and restart the backbone access network from Monday 15 March (following the authorisation of the ESR (Électricité de Strasbourg Réseaux)).
To repower the site:

o Two generators have been rented since 11/03 to power the temporary office.
o One additional generator was rented to recharge the batteries of our generators following their activation during the incident.

• Several service providers are currently working on site (30 people)
o The water on the floor of the SBG3 building has been cleaned up
o The SBG3 building is currently being dried out, which should be completed by Sunday evening
o The cleaning of any soot in the server rooms of SBG3 will begin on Monday.

• Repair of the damaged cooling system:
o A crane has arrived on site.

Priority #2:

• For customers who have been impacted, we are offering replacement infrastructures (Bare Metal, Hosted Private Cloud and Public Cloud) in our Roubaix (RBX) and Gravelines (GRA) datacentres.
• We are committed to providing around 15,000 new servers in the coming weeks.
• Update on quantities delivered since 10/03:


Cloud Universe :
+Baremetal
+Bare Metal - DS - Quantity : 3083
+NAS-HA - TB - Quantity : 195
+Public Cloud
+VPS - VM - Quantity : 5936
+Hosted Private Cloud
+Host - DS - Quantity : 207
+Datastore
+Number of Zpool : 205
+Volume of TB : 1772

Priority #3:

• Backup mechanisms:
o An overview of all backup mechanisms will be published in the FAQ today.
o For Public Cloud and VPS customers, questions about “zone vs datacentre (SBG)” will be clarified in the FAQ today.
o An ad hoc mechanism is in place to help our customers set up their DRP system.

Communications
• FAQs are available at the following link: https://help.ovhcloud.com/en-gb/faq/strasbourg-incident/
• To follow updates about this situation in real time:
o Our main communication tool remains "Task Status "
o Status videos are available here:
- FR: https://twitter.com/olesovhcom/status/1370045226929299461

- EN: https://twitter.com/olesovhcom/status/1370045891806175232

o Octave Klaba’s Twitter account: https://twitter.com/olesovhcom
o OVHcloud Twitter: https://twitter.com/ovhcloud

Our mission remains to provide our customers with the highest quality of service, to support their online business. And we know how important this is to them. We sincerely apologise for the problems caused by this fire. We will continue to communicate with the utmost transparency about the cause of the fire and its consequences.

An investigation is ongoing. Whatever the cause of the incident, OVHcloud is currently evaluating potential technical and operational measures to bring solutions to all affected customers.

All of our communication channels, including our incident tracking platform, can be accessed so that you can stay informed of developments in real time.

---

Informations client :

1 - Statut des Services
• Nous avons informé tous nos clients par mail du statut de leurs services.

2 - Mesures commerciales
• La facturation a été suspendue pour les clients du datacentre de Strasbourg (SBG) à la date de l’incident.
• Les mesures commerciales ont été indiquées à chaque client impacté.
• Les modalités d’application de ces mesures seront communiquées la semaine prochaine. Elles concerneront notamment les facturations au titre du mois de mars relatives aux services impactés déjà émises avant la date de l’incident.
• Nous avons mis à jour la FAQ.

Nos trois priorités sont les suivantes :

• Priorité 1 : rétablissement des services sur SBG1, SBG3 et SBG4.
• Priorité 2 : mise à disposition d’infrastructures pour nos clients impactés dans d’autres datacentres.
• Priorité 3 : mise en œuvre avec nos clients de tous les mécanismes de PRA (Plan de Reprise d’Activité).

Plan d’action :
Priorité #1 :

SBG-1
- Situation : 4 salles sur 12 ont été endommagées
- Redémarrage électrique : A partir de lundi 15 mars.
- Redémarrage des Serveurs : Remise en fonction progressive des serveurs non endommagés d’ici le 22 mars

SBG-2
- Situation : Bâtiment hors d’usage
- Redémarrage électrique : Audit et inventaire des lieux.
- Redémarrage des Serveurs : Remplacement des infrastructures sur d’autres datacenters

SBG-3
- Situation : Serveurs préservés
- Redémarrage électrique : Des tests pour l’alimentation de la haute tension seront effectués ce week-end. Redémarrage provisoire le 15 mars.
- Redémarrage des Serveurs : Le redémarrage progressif de tous les services est estimé à partir du lundi 22 mars.

SBG-4
- Situation : Serveurs préservés
- Redémarrage électrique : Prévu le lundi 15 mars.
- Redémarrage des Serveurs : Le redémarrage progressif de tous les services est estimé à partir du lundi 22 mars.

• Unités mobiles de réseau et d’électricité Haute Tension arrivées sur le site de Strasbourg ce jour à 12h.
• 60 experts travaillent actuellement sur place (rotation durant le week-end) avec les missions suivantes, organisées en 4 équipes :
1. L’équipe 1 « réseau » est missionnée pour la connexion de l’unité mobile réseau et les tests sur la salle réseau de SBG1
2. L’équipe 2 « électricité » pour la connexion de l’électricité Haute Tension
3. L’équipe 3 « électricité » pour la connexion de l’électricité Basse Tension
4. L’équipe 4 pour la protection et la remise en service des refroidissements

L’objectif est le raccordement pour la re-énergisation et la remise en route du réseau accès backbone lundi à partir du lundi 15 Mars (suivant l’autorisation de ESR).
Pour la ré-énergisation du site :
o 2 groupes électrogènes ont été loués depuis le 11/03 pour l’alimentation éléctrique du bureau temporaire.
o 1 groupe électrogène additionel a été loué pour recharger les batteries de nos groupes électrogènes suite à leur mise en fonctionnement pendant l’incident.

• Plusieurs prestataires travaillent actuellement sur place (30 personnes)
o Le nettoyage de l’eau au sol du bâtiment SBG3 est terminé
o Le séchage du bâtiment SBG3 est en cours pour être terminé avant ce dimanche soir
o Le nettoyage des suies éventuelles présentes dans les salles serveurs du bâtiment SBG3 commencera ce lundi.

• Réparation du système de refroidissement endommagé :
o Une grue est arrivée sur site.

Priorité #2 :

• Nous proposons aux clients concernés une infrastructure de remplacement (Bare Metal, Hosted Private Cloud et Public Cloud) dans les datacenters de Roubaix (RBX) et Gravelines (GRA).
• Nous nous engageons à produire près de 15 000 nouveaux serveurs dans les prochaines semaines.
• Point sur les quantités livrées depuis le 10/03 :

Cloud Universe :
+Baremetal
+Bare Metal - DS - Quantity : 3083
+NAS-HA - TB - Quantity : 195
+Public Cloud
+VPS - VM - Quantity : 5936
+Hosted Private Cloud
+Host - DS - Quantity : 207
+Datastore
+Number of Zpool : 205
+Volume of TB : 1772

Priorité #3 :

• Les mécanismes de Backup :
o Une vue d’ensemble de tous les mécanismes de backup sera mise en ligne dans la journée sur la FAQ.
o Pour les clients Public Cloud et VPS, la notion de « zone » vs datacentre (SBG) sera clarifiée dans la FAQ aujourd’hui.
o Un dispositif adhoc pour aider nos clients à mettre en place leur systme de PRA.

Communication
• Une FAQ est disponible à cette adresse : https://help.ovhcloud.com/fr/faq/incendie-strasbourg/
• Pour suivre l’évolution de la situation en temps réel :
o notre principal outil de communication reste notre espace « Tâches travaux »
o des vidéos de statut sont disponibles ici :
- FR : https://twitter.com/olesovhcom/status/1370045226929299461
- EN : https://twitter.com/olesovhcom/status/1370045891806175232

o Le compte Twitter d’Octave Klaba : https://twitter.com/olesovhcom
o OVHcloud sur Twitter : https://twitter.com/ovhcloud_fr

Notre mission reste de fournir à nos clients la plus haute qualité de service, pour soutenir leur activité en ligne. Et nous savons combien cela est important pour eux. Nous nous excusons sincèrement pour les problèmes provoqués par cet incident. Nous continuerons à communiquer avec la plus grande transparence sur la cause de l'incendie et ses conséquences.

Une enquête est en cours. Quelle que soit la cause de l'incident, OVHcloud évalue actuellement les mesures techniques et opérationnelles potentielles visant à apporter des solutions aux clients touchés.

Tous nos canaux de communication, à commencer par notre plateforme de suivi d’incidents, sont accessibles pour vous tenir informés en temps réel sur l’évolution de la situation.


Comment by OVH - Sunday, 14 March 2021, 17:08PM

Customer information:

1 - Server status

• A page has been created listing the backups of services hosted in Strasbourg (SBG) managed by the customer or by OVHcloud along with their status, which will be available in the FAQ within the next few hours.
• For Public Cloud and VPS customers, a question about “zone vs datacentre (SBG)” has been clarified in the FAQ today.

2 - Commercial actions
• All affected customers will be notified about their suspended March bill in their Control Panel.
• Details on how these measures will be implemented will be sent next week, and will also apply to March bills for impacted services that were already issued before 10th March.

3 - Action plan:

Priority 1: restoring services to SBG1, SBG3 and SBG4

• Status summary for each datacentre

SBG-1
- Situation : 4 of 12 rooms were damaged
- Electrical restart : Temporarily repowered on 13th March and will be restored permanently on 17th March
- Network restart :
+ Backbone: temporary connection to SBG on 15th March
+ Internal network to be redeployed on 17th March
- Server restart : Provisional ETA: Monday, 22 March for gradual restart

SBG-2
- Situation : Building out of use
- Server restart : Replacing infrastructures in other datacentres

SBG-3
- Situation : Servers undamaged
- Electrical restart : Temporarily repowered on 12th March and will be restored permanently on 16th March
- Network restart :
+ New network room to be deployed and powered on 16/03
+ Internal network to be redeployed on 17th March
- Server restart : Provisional ETA: Monday, 22 March for gradual restart

SBG-4
- Situation : Servers undamaged
- Electrical restart : Power will return permanently on 17th March
- Network restart : Internal network to be redeployed on 17th March
- Server restart : Provisional ETA: Monday, 22 March for gradual restart

• A team of 60 people is working on site to connect mobile network and electricity units (working in rotation, 24 hours a day):
o Cabling in progress.
o Connection planned for tonight.

• The drying out of the SBG3 buildings will be finished tonight.

• The cleaning of any soot in the SBG3 server rooms will begin on Tuesday, 16 March.

• The cooling system is operational:
o Water cooling is protected from the cold weather (forecast locally on Thursday, 18 March and Friday, 19 March).
o The pumps are operational.

• Priority 2: providing infrastructures in other datacentres for our affected customers

• For customers who have been impacted, we are offering replacement infrastructures (Bare Metal, Hosted Private Cloud and Public Cloud) in our Roubaix (RBX) and Gravelines (GRA) datacentres.

• We are committed to providing around 15,000 new servers in the coming weeks.

• Update on quantities delivered since 10th March:

Cloud Universe :
+Baremetal
+Bare Metal - servers - Quantity : 3424
+NAS-HA - TB - Quantity : 196
+Public Cloud
+VPS - VM - Quantity : 7770
+Hosted Private Cloud
+Host - servers - Quantity : 207
+Datastore
+Number of Zpool : 205
+Volume of TB : 1772

• Priority 3: Implementing all DRP (Disaster Recovery Plan) mechanisms with our customers
o Our Support teams and Technical Account Managers are in contact with our customers, and have set up a support plan for customers who have not yet activated their DRP.

Communications

• FAQs are available at the following link: https://help.ovhcloud.com/en-gb/faq/strasbourg-incident/

• To follow updates about this situation in real time:
o Our main communication tool remains "Task Status "
o Status videos are available here:
- FR: https://twitter.com/olesovhcom/status/1370045226929299461
- EN: https://twitter.com/olesovhcom/status/1370045891806175232

o Octave Klaba’s Twitter account: https://twitter.com/olesovhcom
o OVHcloud Twitter: https://twitter.com/ovhcloud_fr

Our mission remains to provide our customers with the highest quality of services to support their online activities, and we know how important this is to them. We sincerely apologise for the problems caused by this fire. We will continue to communicate with the utmost transparency about the cause of the fire and its consequences.

An investigation is ongoing. Whatever the cause of the incident, OVHcloud is currently evaluating potential technical and operational measures to bring solutions to all affected customers.

All of our communication channels, including our incident tracking platform, can be accessed so that you can stay informed of developments in real time.

---

Informations client :

1 - Statut des services

• Création d’une page qui recense les Backup de services hébergés à Strasbourg (SBG) managés par le client ou par OVHcloud et leur statut, qui sera disponible dans les prochaines heures dans la FAQ.

• Pour le service VPS, la notion de « zone » vs datacentre (SBG) a été clarifiée dans la FAQ.

2 - Mesures commerciales
• Tous les clients impactés ont une notification de suspension de leur facturation au titre du mois de mars dans leur espace client.

• Les modalités d’application de ces mesures seront communiquées la semaine prochaine. Elles concerneront notamment les facturations au titre du mois de mars relatives aux services impactés déjà émises avant la date de l’incident.

3 - Plan d’action :

Priorité #1 : rétablissement des services sur SBG1, SBG3 et SBG4.

• Tableau récapitulatif du statut de chaque datacentre

SBG-1
- Situation : 4 salles sur 12 ont été endommagées
- Redémarrage électrique : Ré-énergisé temporairement le 13/03 et définitivement le 17/03
- Redémarrage Réseau :
- Backbone : connexion temporaire à SBG le 15/03.
- Redéploiement réseau interne le 17/03.
- Redémarrage des Serveurs : ETA provisoire le lundi 22 Mars pour redémarrage progressif

SBG-2
- Situation : Bâtiment hors d’usage
- Redémarrage des Serveurs : Remplacement des infrastructures sur d’autres datacenters

SBG-3
- Situation : Serveurs préservés
- Redémarrage électrique : Ré-énergisé temporairement le 12/03 et définitivement le 16/03
- Redémarrage Réseau :
- Nouvelle salle réseau déployée et energisée le 16/03.
- Redéploiement réseau interne le 17/03.
- Redémarrage des Serveurs : ETA provisoire le lundi 22 Mars pour redémarrage progressif

SBG-4
- Situation : Serveurs préservés
- Redémarrage électrique : Ré-energisé definitivement le 17/03
- Redémarrage Réseau : Redéploiement réseau interne le 17/03.
- Redémarrage des Serveurs : ETA provisoire le lundi 22 Mars pour redémarrage progressif

• Une équipe de 60 personnes est dédiée sur place à la connexion des unités mobiles de réseau et d’électricité (en rotation, 24/24) :
o Câblage en cours.
o Raccordement planifié ce soir.

• Le séchage des bâtiments SBG3 sera terminé ce soir.

• Le nettoyage détaillé des suies éventuelles présentes dans les salles serveurs du bâtiment SBG3 commencera ce mardi 16/03.

• Le système de refroidissement est fonctionnel :
o Le watercooling est protégé du froid (annoncé localement jeudi 18/03 et vendredi 19/03).
o Les pompes sont opérationnelles.

• Priorité #2 : mise à disposition d’infrastructures pour nos clients impactés dans d’autres datacentres.

• Nous proposons aux clients concernés une infrastructure de remplacement (Bare Metal, Hosted Private Cloud et Public Cloud) dans les datacenters de Roubaix (RBX) et Gravelines (GRA).

• Nous nous engageons à produire près de 15 000 nouveaux serveurs dans les prochaines semaines.

• Point sur les quantités livrées depuis le 10/03 :

Cloud Universe :
+Baremetal
+Bare Metal - servers - Quantity : 3424
+NAS-HA - TB - Quantity : 196
+Public Cloud
+VPS - VM - Quantity : 7770
+Hosted Private Cloud
+Host - servers - Quantity : 207
+Datastore
+Number of Zpool : 205
+Volume of TB : 1772

• Priorité #3 : mise en œuvre avec nos clients de tous les mécanismes de PRA (Plan de Reprise d’Activité).
o Nos équipes Support et nos Technical Account Managers sont en lien avec nos clients et ont mis en place un plan d’assistance destiné aux clients n’ayant pas encore activés leur PRA.

Communication

• Une FAQ est disponible à cette adresse : https://help.ovhcloud.com/fr/faq/incendie-strasbourg/

• Pour suivre l’évolution de la situation en temps réel :
o notre principal outil de communication reste notre espace « Tâches travaux »
o des vidéos de statut sont disponibles ici :
- FR : https://twitter.com/olesovhcom/status/1370045226929299461
- EN : https://twitter.com/olesovhcom/status/1370045891806175232

o Le compte Twitter d’Octave Klaba : https://twitter.com/olesovhcom
o OVHcloud sur Twitter : https://twitter.com/ovhcloud_fr


Notre mission reste de fournir à nos clients la plus haute qualité de service, pour soutenir leur activité en ligne et nous savons combien cela est important pour eux. Nous nous excusons sincèrement pour les problèmes provoqués par cet incident. Nous continuerons à communiquer avec la plus grande transparence sur la cause de l'incendie et ses conséquences.

Une enquête est en cours. Quelle que soit la cause de l'incident, OVHcloud évalue actuellement les mesures techniques et opérationnelles potentielles visant à apporter des solutions aux clients touchés.

Tous nos canaux de communication, à commencer par notre plateforme de suivi d’incidents, sont accessibles pour vous tenir informés en temps réel sur l’évolution de la situation.


Comment by OVH - Monday, 15 March 2021, 09:09AM

We provide you with a page summarizing the status of services and availability of backups.
This page is updated according to field information

https://www.ovhcloud.com/en/lp/status-services-backup-strasbourg/
---

Nous mettons à votre disposition une page résumant l'état des services et disponibilités des backups.
Cette page est mise à jour en fonction des informations terrain

https://www.ovhcloud.com/fr/lp/status-services-backup-strasbourg/


Comment by OVH - Monday, 15 March 2021, 17:24PM

Customer information:

1 - Server status

• The status page for services and backups in Strasbourg (SBG) is now available in the FAQ.

• For VPS service, a question about “zone vs datacentre (SBG)” has been added for clarification in the FAQ.

2 - Commercial actions
• For each customer concerned:
o A billing suspension notification for the month of March has been added in the Customer Control Panel.
o Commercial actions have been indicated, the details of which will be communicated this week.

3 - Action plan:

Priority 1: restoring services to SBG1, SBG3 and SBG4

• Status summary for each datacentre

SBG-1
- Situation : 4 of 12 rooms were damaged
- Electrical restart : Temporarily repowered on 13th March and will be restored permanently on 16th March
- Network restart :
+ Backbone: temporary connection to SBG on 15th March
+ Internal network to be redeployed on 16th March
- Server restart : Provisional ETA: Monday, 22 March for gradual restart

SBG-2
- Situation : Building out of use. Structural expertise carried out. Site secured
- Server restart : Replacing infrastructures in other datacentres

SBG-3
- Situation : Servers undamaged
- Electrical restart : Temporarily repowered on 12th March and will be restored permanently on 16th March
- Network restart :
+ New network room to be deployed and powered on 16th March
+ Internal network to be redeployed on 17th March
- Server restart : Provisional ETA: Monday, 22 March for gradual restart

SBG-4
- Situation : Servers undamaged
- Electrical restart : Power will return permanently on 16th March
- Network restart : Internal network to be redeployed on 16th March
- Server restart : Provisional ETA: Monday, 22 March for gradual restart

• 111 people are dedicated on-site to connecting network and electricity units (in rotation, 24/24), for:

• Power redeployment:
o The electrical installations required to restart SBG1/SBG4 have been verified.
o The high-voltage power supply for SBG3 is deployed and operational.
o Inverter re-commissioning protocol underway today (verification of all UPS).

• Network redeployment:
o The SBG1 network room is being tested.
o The new network room is being completed and will be supplied with electricity as soon as the inverters are verified.
o The installation of the network equipment will be finalised this evening.
o The connection of the backbone is scheduled for tomorrow.
o The local network is being redeployed.

• The cleaning of any soot in the SBG3 server rooms will begin on Tuesday, 16 March. The clean-up teams have arrived on site and are beginning deployed.

Priority 2: providing infrastructures in other datacentres for our affected customers

• For customers who have been impacted, we are offering replacement infrastructures (Bare Metal, Hosted Private Cloud and Public Cloud) in our Roubaix (RBX) and Gravelines (GRA) datacentres.

• We are committed to providing nearly 15,000 new servers to our customers in the coming weeks.

• 500 servers will be produced today.

• Update on quantities delivered since 10th March:

Cloud Universe :
+Baremetal
+Bare Metal - servers - Quantity : 3658
+NAS-HA - TB - Quantity : 220
+Public Cloud
+VPS - VM - Quantity : 8903
+Hosted Private Cloud
+Host - servers - Quantity : 328
+Datastore
+Number of Zpool : 361
+Volume of TB : 2598

Priority 3: Implementing all DRP (Disaster Recovery Plan) mechanisms with our customers
o Our Support teams and Technical Account Managers are in contact with our customers, and have set up a support plan for customers who have not yet activated their DRP.

Communications

• FAQs are available at the following link: https://help.ovhcloud.com/en-gb/faq/strasbourg-incident/

• To follow updates about this situation in real time:
o Our main communication tool remains "Task Status "
o Status videos are available here:
- FR: https://twitter.com/olesovhcom/status/1370045226929299461
- EN: https://twitter.com/olesovhcom/status/1370045891806175232

o Octave Klaba’s Twitter account: https://twitter.com/olesovhcom
o OVHcloud Twitter: https://twitter.com/ovhcloud

Our mission remains to provide our customers with the highest quality of services to support their online activities, and we know how important this is to them. We sincerely apologise for the problems caused by this incident. An investigation into the cause is underway. Whatever the cause of the incident, OVHcloud is currently evaluating potential technical and operational measures to bring solutions to all affected customers.

All of our communication channels, including our incident tracking platform, can be accessed so that you can stay informed of developments in real time.

---

Informations client :

1. Statut des services

• Mise en ligne de la page de statut des services et backups à Strasbourg (SBG), accessible depuis la FAQ.
• Pour le service VPS, la notion de « zone » vs datacenter (SBG) est documentée dans la FAQ.

2. Mesures commerciales
• Pour chaque client concerné :
o Une notification de suspension de facturation au titre du mois de mars a été ajoutée dans l’espace client.
o Des mesures commerciales ont été indiquées, dont les modalités détaillées seront communiquées cette semaine.

3. Plan d’action

Priorité #1 : rétablissement des services sur SBG1, SBG3 et SBG4

• Tableau récapitulatif du statut de chaque datacenter

SBG-1
- Situation : 4 salles sur 12 ont été endommagées
- Redémarrage électrique : Ré-énergisé temporairement le 13/03 et définitivement le 16/03
- Redémarrage Réseau :
- Backbone : connexion temporaire à SBG le 15/03.
- Redéploiement réseau interne le 16/03.
- Redémarrage des Serveurs : ETA provisoire le lundi 22 Mars pour redémarrage progressif

SBG-2
- Situation : Bâtiment hors d’usage. Expertise structure effectuée. Site mis en sécurité.
- Redémarrage des Serveurs : Remplacement des infrastructures sur d’autres datacenters

SBG-3
- Situation : Serveurs préservés
- Redémarrage électrique : Ré-énergisé temporairement le 12/03 et définitivement le 16/03
- Redémarrage Réseau :
- Nouvelle salle réseau déployée et energisée le 16/03.
- Redéploiement réseau interne le 17/03.
- Redémarrage des Serveurs : ETA provisoire le lundi 22 Mars pour redémarrage progressif

SBG-4
- Situation : Serveurs préservés
- Redémarrage électrique : Ré-energisé definitivement le 16/03
- Redémarrage Réseau : Redéploiement réseau interne le 16/03.
- Redémarrage des Serveurs : ETA provisoire le lundi 22 Mars pour redémarrage progressif


• 111 personnes sont dédiées sur place à la connexion des unités mobiles de réseau et d'électricité (en rotation, 24/24) :

• Le redéploiement de l’énergie
o Les installations électriques nécessaires à la remontée de SBG1/SBG4 ont été vérifiées.
o Le conteneur pour la réalimentation haute tension de SBG3 est déployé et fonctionnel.
o Protocole de remise en service des onduleurs en cours ce jour (vérification de tous les UPS).

• Le redéploiement du réseau
o La salle réseau de SBG1 est en cours de test.
o La nouvelle salle de routage réseau est en cours de finalisation et sera alimentée en électricité ondulée dès vérification de ces onduleurs.
o L’installation des équipements réseau sera finalisée ce soir.
o La connexion de la backbone est planifiée demain, mardi 16/03.
o Le redéploiement du réseau local est en cours.


• Le nettoyage détaillé des suies éventuelles présentes dans les salles des serveurs du bâtiment SBG3 commencera ce mardi 16/03. Les équipes de nettoyage sont arrivées sur site et commencent à se déployer.


Priorité #2 : mise à disposition d’infrastructures pour nos clients affectés dans d’autres datacenters

• Nous proposons aux clients concernés une infrastructure de remplacement (Bare Metal, Hosted Private Cloud et Public Cloud) dans les datacenters de Roubaix (RBX) et Gravelines (GRA).
• Nous nous engageons à mettre près de 15 000 nouveaux serveurs à disposition de nos clients dans les prochaines semaines.

• 500 serveurs seront produits ce jour.

• Point sur les quantités livrées depuis le 10/03 :

Cloud Universe :
+Baremetal
+Bare Metal - servers - Quantity : 3658
+NAS-HA - TB - Quantity : 220
+Public Cloud
+VPS - VM - Quantity : 8903
+Hosted Private Cloud
+Host - servers - Quantity : 328
+Datastore
+Number of Zpool : 361
+Volume of TB : 2598

Priorité #3 : mise en œuvre avec nos clients de tous les mécanismes de PRA (plan de reprise d’activité)
• Nos équipes Support et nos Technical Account Managers sont en lien avec nos clients et ont mis en place un plan d’assistance destiné à ceux n’ayant pas encore activé leur PRA.

Communication

• Une FAQ est disponible à cette adresse : https://help.ovhcloud.com/fr/faq/incendie-strasbourg/

• Pour suivre l’évolution de la situation en temps réel :
o notre principal outil de communication reste notre espace « Tâches travaux »
o des vidéos de statut sont disponibles ici :
- FR : https://twitter.com/olesovhcom/status/1370045226929299461
- EN : https://twitter.com/olesovhcom/status/1370045891806175232

o Le compte Twitter d’Octave Klaba : https://twitter.com/olesovhcom
o OVHcloud sur Twitter : https://twitter.com/ovhcloud_fr

Notre mission reste de fournir à nos clients la plus haute qualité de service, pour soutenir leur activité en ligne. Et nous savons combien cela est important pour eux. Nous leur présentons nos sincères excuses pour les problèmes provoqués par cette situation. Une enquête est en cours sur la cause de celle-ci. Quelle que soit son origine, OVHcloud évalue actuellement les mesures techniques et opérationnelles potentielles visant à apporter des solutions aux clients touchés.

Tous nos canaux de communication, à commencer par notre plateforme de suivi d’incidents, sont accessibles pour vous tenir informés en temps réel sur l’évolution de la situation.


Comment by OVH - Tuesday, 16 March 2021, 18:09PM

Customer information:

1. Service Status

• Progressive updates to the status page for services and backups in Strasbourg (SBG), from today onwards, accessible via the FAQ.

• Monitoring of the % of service restarts per datacentre to be displayed in the "Travaux" interface in the coming days. Restarts will be carried out room by room, aisle by aisle and rack by rack.

• Finalized procedures for restarting services will soon be communicated to customers.

2. Commercial actions
• For each customer concerned:
o A billing suspension notification for the month of March has been added in the Customer Control Panel.
o Commercial actions have been indicated, the details of which will be communicated this week.

3. Plan of action

Priority 1: restoring services to SBG1, SBG3 and SBG4

• Status summary for each datacentre


SBG-1
- Situation : 4 of 12 rooms were damaged
+ Rooms 61AD/62AD: servers not affected
+ Rooms 61E/62E: cleaning of servers underway

- Electrical restart :
+ Power restored
+ Damaged UPS have been checked and are being replaced

- Network restart :
+ Backbone: temporary connection to SBG on 15th March
+ LAN redeployment and configuration today

- Server restart : Provisional ETA: Monday, 22 March for gradual restart

SBG-2
- Situation : Building out of use. Structural expertise carried out. Site secured

- Server restart : Infrastructure replacement in other data centres Gravelines (GRA), Roubaix (RBX), London (LON), Warsaw (WAW), Frankfurt (FRA)

SBG-3
- Situation : Servers undamaged

- Electrical restart :
+ Power restored today
+ All inverters are operational

- Network restart :
+ New network room powered up today
+ Redeployment of the local network on 17th March

- Server restart : Provisional ETA: Monday, 22 March for gradual restart

SBG-4
- Situation : All floors and servers were spared
- Electrical restart : Power restored today
- Network restart : Redeployment of the local network today
- Server restart : Provisional ETA: Monday, 22 March for gradual restart


• 101 people are mobilised and on premises

• Network redeployment:
o SBG connection to the backbone today (alternative routes to Paris and Frankfurt underway)
o Reconnection of buildings and rooms:
 Fibre optic redeployment in progress
 Configuration underway

• Watercooling:
o The entire system is operational.

• Cleaning of site:
o Intensive mobilisation (24/24).

Priority 2: Provisioning of infrastructure for our customers in other datacentres

• For customers who have been impacted, we are offering replacement infrastructures (Bare Metal, Hosted Private Cloud and Public Cloud) in our other datacentres: Gravelines (GRA), Roubaix (RBX), Londres (LON), Warsaw (WAW), Francfort (FRA).

• We are committed to providing nearly 15,000 new servers to our customers in the coming weeks. Update on quantities delivered since 10th March:

Cloud Universe :
- Baremetal
+Bare Metal - servers - Quantity : 3939
+NAS-HA - TB - Quantity : 222
- Public Cloud
+VPS - VM - Quantity : 10731
- Hosted Private Cloud
+Host - servers - Quantity : 372
+Datastore
+Number of Zpool : 393
+Volume of TB : 2704

• 350 servers will be produced today.

Priority 3: Implementing all DRP (Disaster Recovery Plan) mechanisms with our customers
• Our Support teams and Technical Account Managers are in contact with our customers and have set up a support plan for customers who have not yet activated their DRP.

Communications

• FAQs are available at the following link: https://help.ovhcloud.com/en-gb/faq/strasbourg-incident/

• To follow updates about this situation in real time:
o Our main communication tool remains "Task Status"
o Status videos are available here:
- FR: https://twitter.com/olesovhcom/status/1370045226929299461

- EN: https://twitter.com/olesovhcom/status/1370045891806175232

o Octave Klaba’s Twitter account: https://twitter.com/olesovhcom
o OVHcloud Twitter: https://twitter.com/ovhcloud


Our mission remains to provide our customers with the highest quality of service, to support their online business and we know how important this is to them. We sincerely apologise for any inconveniences related to this situation. An investigation into the cause is underway. Whatever the cause of the incident, OVHcloud is currently evaluating potential technical and operational measures to bring solutions to all affected customers.

All of our communication channels, including our incident tracking platform, can be accessed so that you can stay informed of developments in real time.

-------------------------------------------------------------------------------

Informations client :

1. Statut des services

• Actualisation progressive de la page de statut des services et backups à Strasbourg (SBG) à partir d’aujourd’hui, accessible depuis la FAQ.
• Suivi du pourcentage de redémarrage des services par datacenter planifiée dans l’interface « Travaux » dans les prochains jours. Le redémarrage s’effectuera salle par salle, allée par allée et baie par baie.
• Rédaction finalisée des procédures de redémarrage des services, qui seront communiquées prochainement aux clients.

2. Mesures commerciales
• Pour chaque client concerné :
o une notification de suspension de la facturation, au titre du mois de mars, a été ajoutée dans l’espace client ;
o des mesures commerciales ont été indiquées, dont les modalités détaillées seront communiquées cette semaine.

3. Plan d’action

Priorité #1 : rétablissement des services sur SBG1, SBG3 et SBG4

• Tableau récapitulatif du statut de chaque datacenter


SBG-1
- Situation : 4 salles sur 12 ont été endommagées
+ Salles 61AD/62AD : serveurs non affectés
+ Salles 61E/62E : nettoyage des serveurs en cours

- Redémarrage électrique :
+ Re-énergisation définitive ce jour
+ Les UPS endommagés ont été vérifiés et sont en cours de remplacement

- Redémarrage Réseau :
+ Backbone : connexion temporaire à SBG le 15/03
+ Redéploiement du réseau local et configuration ce jour

- Redémarrage des Serveurs : ETA provisoire le lundi 22 Mars pour redémarrage progressif

SBG-2
- Situation : Bâtiment hors d’usage. Expertise structure effectuée. Site mis en sécurité.

- Redémarrage des Serveurs : Remplacement des infrastructures sur d’autres datacenters : Gravelines (GRA), Roubaix (RBX), Londres (LON), Varsovie (WAW), Francfort (FRA)

SBG-3
- Situation : Serveurs préservés

- Redémarrage électrique :
+ Re-énergisation définitive ce jour
+ Tous les onduleurs sont opérationnels

- Redémarrage Réseau :
+ Nouvelle salle réseau énergisée ce jour
+ Redéploiement du réseau local le 17/03

- Redémarrage des Serveurs : ETA provisoire le lundi 22 Mars pour redémarrage progressif

SBG-4
- Situation : Tous les étages et tous les serveurs sont préservés
- Redémarrage électrique : Re-énergisation définitive ce jour
- Redémarrage Réseau : Redéploiement du réseau local ce jour
- Redémarrage des Serveurs : ETA provisoire le lundi 22 Mars pour redémarrage progressif


• 101 personnes sont mobilisées sur place ce jour

• Redéploiement du réseau
o Connexion de SBG à la backbone ce jour (montage des rocades vers Paris et Francfort en cours).
o Reconnexion des bâtiments et des salles :
 redéploiement des fibres optiques en cours ;
 configuration en cours.

• Watercooling :
o Tout le système est opérationnel.

• Nettoyage du site
o Mobilisation intensive (24 h/24).

Priorité #2 : mise à disposition d’infrastructures pour nos clients affectés dans d’autres datacenters

• Nous proposons aux clients concernés une infrastructure de remplacement (Bare Metal, Hosted Private Cloud et Public Cloud) dans nos autres datacenters de Gravelines (GRA), Roubaix (RBX), Londres (LON), Varsovie (WAW) et Francfort (FRA).

• Nous nous engageons à mettre près de 15 000 nouveaux serveurs à disposition de nos clients dans les prochaines semaines. Point sur les quantités livrées depuis le 10/03 :

Cloud Universe :
- Baremetal
+Bare Metal - servers - Quantity : 3939
+NAS-HA - TB - Quantity : 222
- Public Cloud
+VPS - VM - Quantity : 10731
- Hosted Private Cloud
+Host - servers - Quantity : 372
+Datastore
+Number of Zpool : 393
+Volume of TB : 2704

• 350 serveurs seront produits ce jour.

Priorité #3 : mise en œuvre avec nos clients de tous les mécanismes de PRA (plan de reprise d’activité)

• Nos équipes Support et nos Technical Account Managers sont en lien avec nos clients et ont mis en place un plan d’assistance destiné à ceux n’ayant pas encore activé leur PRA.


Communication

• Une FAQ est disponible à cette adresse : https://help.ovhcloud.com/fr/faq/incendie-strasbourg/

• Pour suivre l’évolution de la situation en temps réel :
o notre principal outil de communication reste notre espace « Tâches travaux »
o des vidéos de statut sont disponibles ici :
- FR : https://twitter.com/olesovhcom/status/1370045226929299461
- EN : https://twitter.com/olesovhcom/status/1370045891806175232

o Le compte Twitter d’Octave Klaba : https://twitter.com/olesovhcom
o OVHcloud sur Twitter : https://twitter.com/ovhcloud_fr


Notre mission reste de fournir à nos clients la plus haute qualité de service, pour soutenir leur activité en ligne. Et nous savons combien cela est important pour eux. Nous leur présentons nos sincères excuses pour les inconvénients relatifs à cette situation. Une enquête est en cours sur la cause de celle-ci. Quelle que soit son origine, OVHcloud évalue actuellement les mesures techniques et opérationnelles potentielles visant à apporter des solutions aux clients touchés.

Tous nos canaux de communication, à commencer par notre plateforme de suivi d’incidents, sont accessibles pour vous tenir informés en temps réel sur l’évolution de la situation.


Comment by OVH - Wednesday, 17 March 2021, 17:01PM

1. Service Status

• Octave Klaba, founder of OVHcloud, has released a new video on the situation in Strasbourg (SBG). => https://twitter.com/olesovhcom/status/1371934994751500288
• In the Control Panel, each affected customer can view the status of their services located in Strasbourg (SBG) - as detailed in the FAQ. => https://help.ovhcloud.com/en/faq/strasbourg-incident/how-can-get-overview-impact/
• The OVHcloud Community platform is now available to interact with community members and support you.
By following the security protocol defined for on-premises operations: restarting will be carried out room by room, aisle by aisle and rack by rack.
• Procedures for restarting services will be communicated to affected customers as details become available in the coming days.
• Real-time monitoring of SBG restart by room and planned rack via: status.ovh.com/vms.
• Progressive updates to the status page for services and backups in Strasbourg (SBG), from today onwards, accessible via the FAQ.
• Updating and tracking the percentage of services restarted per datacentre scheduled in the “Task Status” interface in the coming days.
• A new order form has been set up (for Bare Metal Cloud) to offer concerned customers services similar to those they had at the Strasbourg (SBG) site.


2. Commercial actions

• All concerned customers received, at the beginning of the week, a communication on the commercial measures that will be applied to their situation. For customers who have not received the email, a procedure has been indicated in the FAQ.
• For each customer concerned:
o A billing suspension notification for the month of March has been added in the Customer Control Panel.
o Commercial actions have been indicated, the details of which will be communicated this week.

3. Plan of action

Priority 1: restoring services to SBG1, SBG3 and SBG4

• Status summary for each datacentre

SBG-1
- Situation : 4 of 12 rooms were damaged
+ Rooms 61AD/62AD: servers not affected
+ Rooms 61E/62E: cleaning of servers underway

- Electrical restart : Restored power to datacentre

- Network restart :
+ Backbone: reconnected
+ Redeployment of the local network (Cabling finalised this Wednesday) and configuration today

- Server restart : A rack was tested today and if conclusive a provisional estimate of Friday, 19 March for a gradual restart of services after cleaning and drying servers.
-----
SBG-2
- Situation : Building out of use. Structural expertise carried out. Site secured

- Server restart : Infrastructure replacement in other data centres Gravelines (GRA), Roubaix (RBX), London (LON), Warsaw (WAW), Frankfurt (FRA)
-----
SBG-3
- Situation : Servers undamaged

- Electrical restart : Restored power to datacentre

- Network restart :
+ New network power restored
+ Redeployment of the local network this Wednesday 17th March (Cabling finalised).

- Server restart : Test tomorrow on a rack and if conclusive a provisional estimate of Friday, 19 March for a gradual restart of services.
-----
SBG-4
- Situation : All floors and servers were spared
- Electrical restart : Restored power to datacentre
- Network restart : Redeployment of the local network carried out.
- Server restart : Provisional ETA: Monday, 22 March for gradual restart of services.

• 116 people are mobilised at the premises today

• Network redeployment:
o The SBG1, SBG3 and SBG4 datacentres will be connected to the network tonight.

• Watercooling:
o The entire system is operational in the SBG1/SBG3/SBG4 datacentres.

• Cleaning of site:
o Intensive mobilisation (24/24).
o SBG1: finalisation of cleaning Wednesday, 17th March.

Priority 2: providing infrastructures in other datacentres for our affected customers

• For customers who have been impacted, we are offering replacement infrastructures (Bare Metal, Hosted Private Cloud and Public Cloud) in our other datacentres in Gravelines (GRA), Roubaix (RBX), Londres (LON), Warsaw (WAW), and Frankfurt (FRA).

• We are committed to providing nearly 15,000 new servers to our customers in the coming weeks. Update on quantities delivered since 10th March:

Cloud Universe :
- Baremetal
+Bare Metal - servers - Quantity : 4200
+NAS-HA - TB - Quantity : 276
- Public Cloud
+VPS - VM - Quantity : 11998
- Hosted Private Cloud
+Host - servers - Quantity : 434
+Datastore
+Number of Zpool : 466
+Volume of TB : 2950

• 400 servers will be produced today.

Due to the current demand, delivery times on our Bare Metal services may be longer than usual. Our teams are fully mobilised, and we are working hard to deliver to our customers as quickly as possible, especially all affected customers.
On the other hand, Public Cloud, Web Cloud and VPS services are being delivered as normal in all datacentres.

Priority 3: Implementing all DRP (Disaster Recovery Plan) mechanisms with our customers

• Our Support teams and Technical Account Managers are in contact with our customers and have set up a support plan for customers who have not yet activated their DRP.


Communications

• The OVHcloud Community platform is now available to interact with community members and support you.

• FAQs are available at the following link: https://help.ovhcloud.com/en-gb/faq/strasbourg-incident/

• To follow updates about this situation in real time:
o Our main communication tool remains "Task Status "
o Status videos are available here:
- FR: https://twitter.com/olesovhcom/status/1370045226929299461
- EN: https://twitter.com/olesovhcom/status/1370045891806175232

o Octave Klaba’s Twitter account: https://twitter.com/olesovhcom
o OVHcloud Twitter: https://twitter.com/ovhcloud


Our mission remains to provide our customers with the highest quality of service, to support their online business. and we know how important this is to them. We sincerely apologise any inconveniences related this situation. An investigation into the cause is underway. Whatever the cause of the incident, OVHcloud is currently evaluating potential technical and operational measures to bring solutions to all affected customers.

All of our communication channels, including our incident tracking platform, can be accessed so that you can stay informed of developments in real time.

-------------------------------

Informations client :

1. Statut des services

• Une nouvelle vidéo concernant l’évolution de la situation à Strasbourg (SBG) a été mise en ligne par Octave Klaba, fondateur d’OVHcloud => https://twitter.com/olesovhcom/status/1371908744775360518.
• Dans l’espace client chaque client concerné peut consulter le statut de ses services localisés à Strasbourg (SBG) – tel qu’indiqué dans la FAQ => https://help.ovhcloud.com/fr/faq/strasbourg-incident/how-can-get-overview-impact/.
• La plateforme communautaire OVHcloud Community est dès à présent disponible pour interagir avec les membres de la communauté et vous accompagner.
• En respectant le protocole de sécurité défini pour les interventions sur site : le redémarrage s’effectuera salle par salle, allée par allée et baie par baie.
• Les procédures de redémarrage des services seront communiquées aux clients concernés au fur et à mesure dans les jours à venir.
• Le suivi en temps réel du redémarrage de SBG par salle et par baie planifié est accessible via : status.ovh.com/vms.
• L’actualisation progressive de la page de statut des services et backups à Strasbourg (SBG) à partir d’aujourd’hui, accessible depuis la FAQ.
• L’actualisation et le suivi du pourcentage de redémarrage des services par datacentre est planifiée dans l’interface « Travaux » dans les prochains jours.
• Un nouveau tunnel de commande est mis en place (pour Bare Metal Cloud) afin d’offrir, aux clients concernés, des services similaires à ceux qu’ils avaient sur le site de Strasbourg (SBG).

2. Mesures commerciales

• Tous les clients concernés ont reçu, en début de semaine, une communication sur les mesures commerciales qui seront appliquées à leur situation. Pour les clients qui n’auraient pas reçu le mail une procédure a été indiquée dans la FAQ.

3. Plan d’action

Priorité #1 : rétablissement des services sur SBG1, SBG3 et SBG4

• Tableau récapitulatif du statut de chaque datacentre

SBG-1
- Situation : 4 salles sur 12 ont été endommagées
+ Salles 61AD/62AD : serveurs non affectés
+ Salles 61E/62E : nettoyage des serveurs en cours
- Redémarrage électrique : Datacentre ré-énergisé

- Redémarrage Réseau :
+ Backbone : reconnecté
+ Redéploiement du réseau local. (Câblage finalisé ce mercredi) et configuration ce jour
- Redémarrage des Serveurs : Test aujourd’hui sur une baie et si concluant estimation provisoire au vendredi 19 mars pour un redémarrage progressif des services.
-----
SBG-2
- Situation : Bâtiment hors d’usage. Expertise structure effectuée. Site mis en sécurité.
- Redémarrage des Serveurs : Remplacement des infrastructures sur d’autres datacenters : Gravelines (GRA), Roubaix (RBX), Londres (LON), Varsovie (WAW), Francfort (FRA)
-----
SBG-3
- Situation : Serveurs préservés
- Redémarrage électrique : Datacentre ré-énergisé
- Redémarrage Réseau :
+ Nouvelle salle réseau énergisée
+ Redéploiement du réseau local ce mercredi 17/03 (Câblage finalisé).
- Redémarrage des Serveurs : Test demain sur une baie et si concluant et Estimation provisoire au vendredi 19 mars pour un redémarrage progressif des services après nettoyage et séchage des serveurs.
-----
SBG-4
- Situation : Tous les étages et tous les serveurs sont préservés
- Redémarrage électrique : Datacentre ré-énergisé
- Redémarrage Réseau : Redéploiement du réseau local effectué.
- Redémarrage des Serveurs : ETA provisoire le lundi 22 Mars pour redémarrage progressif


• 116 personnes sont mobilisées sur place ce jour

• Point sur le redéploiement du réseau :
Les datacentres de SBG1, SBG3 et SBG4 seront connectés au réseau ce soir.

• Watercooling :
o Tout le système est opérationnel sur les datacentres SBG1/SBG3/SBG4

• Nettoyage du site
o Mobilisation intensive (24 h/24).
o SBG1 : finalisation du nettoyage ce mercredi 17/03.

Priorité #2 : mise à disposition d’infrastructures pour nos clients affectés dans d’autres datacentres

• Nous proposons aux clients concernés une infrastructure de remplacement (Bare Metal, Hosted Private Cloud et Public Cloud) dans nos autres datacentres de Gravelines (GRA), Roubaix (RBX), Londres (LON), Varsovie (WAW) et Francfort (FRA).

• Nous nous engageons à mettre près de 15 000 nouveaux serveurs à disposition de nos clients dans les prochaines semaines. Point sur les quantités livrées depuis le 10/03 :

Cloud Universe :
- Baremetal
+Bare Metal - servers - Quantity : 4200
+NAS-HA - TB - Quantity : 276
- Public Cloud
+VPS - VM - Quantity : 11998
- Hosted Private Cloud
+Host - servers - Quantity : 434
+Datastore
+Number of Zpool : 466
+Volume of TB : 2950

• 400 serveurs seront produits ce jour.

En raison de la demande actuelle, les délais de livraison sur nos services Bare Metal peuvent être plus long qu’habituellement. Nos équipes sont pleinement mobilisées et nous mettons tout en œuvre pour livrer nos clients au plus vite, en particulier les clients impactés.
En revanche les livraisons des services Public cloud, Web Cloud, VPS sont nominales sur tous les datacentres.

Priorité #3 : mise en œuvre avec nos clients de tous les mécanismes de PRA (plan de reprise d’activité)

• Nos équipes Support et nos Technical Account Managers sont en lien avec nos clients et ont mis en place un plan d’assistance destiné à ceux n’ayant pas encore activé leur PRA.

Communication

• La plateforme communautaire OVHcloud Community est dès à présent disponible pour interagir avec les membres de la communauté et vous accompagner.

• Une FAQ est toujours disponible à cette adresse : https://help.ovhcloud.com/fr/faq/incendie-strasbourg/

• Pour suivre l’évolution de la situation en temps réel :
o notre principal outil de communication reste notre espace « Tâches travaux »
o des vidéos de statut sont disponibles ici :
- FR : https://twitter.com/olesovhcom/status/1370045226929299461
- EN : https://twitter.com/olesovhcom/status/1370045891806175232

o Le compte Twitter d’Octave Klaba : https://twitter.com/olesovhcom
o OVHcloud sur Twitter : https://twitter.com/ovhcloud_fr

Notre mission reste de fournir à nos clients la plus haute qualité de service, pour soutenir leur activité en ligne. Et nous savons combien cela est important pour eux. Nous leur présentons nos sincères excuses pour les inconvénients relatifs à cette situation. Une enquête est en cours sur la cause de celle-ci. Quelle que soit son origine, OVHcloud évalue actuellement les mesures techniques et opérationnelles potentielles visant à apporter des solutions aux clients touchés.

Tous nos canaux de communication, à commencer par notre plateforme de suivi d’incidents, sont accessibles pour vous tenir informés en temps réel sur l’évolution de la situation.


Comment by OVH - Thursday, 18 March 2021, 12:18PM

All network is setup in SBG4. The racks are restarting
You can follow in live the restart by room and planned rack via: http://status.ovh.com/vms/sbg/index.html

-------------------

Tout le réseau est configuré en SBG4. Les racks redémarrent
Vous pouvez suivre le redémarrage par salle et par baie planifiées est accessible via : http://status.ovh.com/vms/sbg/index.html


Comment by OVH - Thursday, 18 March 2021, 17:20PM

Customer information:

1. Service Status

• In the OVHcloud Control Panel, each affected customer can view the status of their services located in Strasbourg (SBG) - as detailed in the FAQ. => https://help.ovhcloud.com/en/faq/strasbourg-incident/how-can-get-overview-impact/
• The OVHcloud Community platform is now available to interact with community members and support you.=> https://community.ovh.com/en/
• By following the security protocol defined for on-premises operations: the restart will be carried out room by room, aisle by aisle and rack by rack.
• Procedures for restarting services will be communicated to affected customers as details become available in the coming days.
• Real-time monitoring of the restart of SBG by room and planned rack is available at: http://status.ovh.com/vms/sbg/


2. Commercial actions
• At the beginning of the week, all customers concerned received a communication on the commercial measures that will be applied to their situation. For customers who have not received the email, a procedure has been indicated in the FAQ.

3. Plan of action

Priority 1: restoring services to SBG1, SBG3 and SBG4

• Status summary for each datacentre

SBG-1
- Situation : Datacentre operational.
- Electrical restart : Accomplished
- Network restart : Accomplished
- Server restart : First racks tested with success. Handover to the customer today with visibility of the status in their OVHcloud Customer Control Panel.
-----
SBG-2
- Situation : Building out of use. Structural expertise carried out. Site secured
- Server restart : Infrastructure replacement in other data centres Gravelines (GRA), Roubaix (RBX), London (LON), Warsaw (WAW), Frankfurt (FRA)
-----
SBG-3
- Situation : Datacentre operational. Servers undamaged.
- Electrical restart : Accomplished
- Network restart : Accomplished
- Server restart : Test today on one rack and if conclusive provisional estimate for Friday 19 March for a progressive restart of the services.
-----
SBG-4
- Situation : Datacentre operational. All floors and servers undamaged.
- Electrical restart : Accomplished
- Network restart : Accomplished
- Server restart : Provisional ETA: Monday, 22 March for gradual restart of services.

• 136 people are mobilised on premises today
o The team rotation schedule for the coming weekend has been established.

• Cleaning of site:
o Cleaning teams are active in SBG1 and SBG3 in all affected areas.
o Some of the servers in SBG3 require specific cleaning prior to their return to service. We have started this process.

Priority 2: Provisioning of infrastructure for our customers in other datacentres

• For customers who have been impacted, we are offering replacement infrastructures (Bare Metal, Hosted Private Cloud and Public Cloud) in our other datacentres in Gravelines (GRA), Roubaix (RBX), Londres (LON), Warsaw (WAW), and Frankfurt (FRA).

• We are committed to providing nearly 15,000 new servers to our customers in the coming weeks.

• Update on quantities delivered since 10th March:

Cloud Universe :
- Baremetal
+Bare Metal - servers - Quantity : 4519
+NAS-HA - TB - Quantity : 246
- Public Cloud
+VPS - VM - Quantity : 12353
- Hosted Private Cloud
+Host - servers - Quantity : 485
+Datastore
+Number of Zpool : 522
+Volume of TB : 3067

• 400 servers will be produced today.

Due to the current demand, delivery times on our Bare Metal services may be longer than usual. Our teams are fully mobilised, and we are working hard to deliver to our customers as quickly as possible, especially all affected customers.
On the other hand, Public Cloud, Web Cloud and VPS services are being delivered as normal in all datacentres.

Priority 3: Implementing all DRP (Disaster Recovery Plan) mechanisms with our customers

• Our Support teams and Technical Account Managers are in contact with our customers and have set up a support plan for customers who have not yet activated their DRP.

Communications

• The OVHcloud Community platform is now available to interact with community members and support you.

• An FAQ is available here.

• To follow updates about this situation in real time:
o Our main communication tool remains "Task Status"
o Status videos are available here:
- FR: https://twitter.com/olesovhcom/status/1370045226929299461
- EN: https://twitter.com/olesovhcom/status/1370045891806175232
o Octave Klaba’s Twitter account: https://twitter.com/olesovhcom
o OVHcloud Twitter: https://twitter.com/ovhcloud

Our mission remains to provide our customers with the highest quality of service, to support their online business. and we know how important this is to them. We sincerely apologise any inconveniences related this situation An investigation into the cause is underway. Whatever the cause of the incident, OVHcloud is currently evaluating potential technical and operational measures to bring solutions to all affected customers.

All of our communication channels, including our incident tracking platform, can be accessed so that you can stay informed of developments in real time.

-------------------------------

Informations client :

1. Statut des services

• Dans l’espace client chaque client concerné peut consulter le statut de ses services localisés à Strasbourg (SBG) – tel qu’indiqué dans la FAQ. => https://help.ovhcloud.com/fr/faq/strasbourg-incident/how-can-get-overview-impact/

• La plateforme communautaire OVHcloud Community est à votre disposition pour interagir avec les membres de la communauté et vous accompagner.

• Dans le respect du protocole de sécurité défini pour les interventions sur site : le redémarrage s’effectuera salle par salle, allée par allée et baie par baie.

• Les procédures de redémarrage des services seront communiquées par mail aux clients concernés au fur et à mesure dans les jours à venir.

• Le suivi en temps réel du redémarrage de SBG par salle et par baie planifié est accessible via : http://status.ovh.com/vms/sbg/

2. Mesures commerciales

• Tous les clients concernés ont reçu, en début de semaine, une communication sur les mesures commerciales qui seront appliquées à leur situation. Pour les clients qui n’auraient pas reçu le mail une procédure a été indiquée dans la FAQ.

3. Plan d’action

Priorité #1 : rétablissement des services sur SBG1, SBG3 et SBG4

• Tableau récapitulatif du statut de chaque datacentre

SBG-1
- Situation : Datacentre opérationnel.
- Redémarrage électrique : Réalisé
- Redémarrage Réseau : Réalisé
- Redémarrage des Serveurs : Premières baies testées avec succès.
Remise à disponibilité client dès aujourd’hui avec visibilité de l’état dans son manager.

-----
SBG-2
- Situation : Bâtiment hors d’usage. Expertise structure effectuée. Site mis en sécurité.
- Redémarrage des Serveurs : Remplacement des infrastructures sur d’autres datacenters : Gravelines (GRA), Roubaix (RBX), Londres (LON), Varsovie (WAW), Francfort (FRA)
-----
SBG-3
- Situation : Datacentre opérationnel. Serveurs préservés.
- Redémarrage électrique : Réalisé
- Redémarrage Réseau :Réalisé
- Redémarrage des Serveurs : Test ce jour sur une baie et si concluant estimation provisoire au vendredi 19 mars pour un redémarrage progressif des services.
-----
SBG-4
- Situation : Datacentre opérationnel.
Tous les étages et tous les serveurs sont préservés.
- Redémarrage électrique : Réalisé
- Redémarrage Réseau : Réalisé
- Redémarrage des Serveurs : Estimation provisoire au lundi 22 mars pour un redémarrage progressif des services.

• 136 personnes sont mobilisées sur place ce jour
o Le planning de rotation des équipes pour le week-end à venir a été établi.

• Nettoyage du site
o Les équipes de nettoyage sont actives dans SBG1 et SBG3 aux endroits nécessaires.
o Une partie des serveurs de SBG3 nécessite un nettoyage spécifique préliminaire à la remise en service. Ce nettoyage a débuté.

Priorité #2 : mise à disposition d’infrastructures pour nos clients affectés dans d’autres datacentres

• Nous proposons aux clients concernés une infrastructure de remplacement (Bare Metal, Hosted Private Cloud et Public Cloud) dans nos autres datacentres de Gravelines (GRA), Roubaix (RBX), Londres (LON), Varsovie (WAW) et Francfort (FRA).

• Nous nous engageons à mettre près de 15 000 nouveaux serveurs à disposition de nos clients dans les prochaines semaines.

• Point sur les quantités livrées depuis le 10/03 :

Cloud Universe :
- Baremetal
+Bare Metal - servers - Quantity : 4519
+NAS-HA - TB - Quantity : 246
- Public Cloud
+VPS - VM - Quantity : 12353
- Hosted Private Cloud
+Host - servers - Quantity : 485
+Datastore
+Number of Zpool : 522
+Volume of TB : 3067

• 400 serveurs seront produits ce jour.

En raison de la demande actuelle, les délais de livraison sur nos services Bare Metal peuvent être plus long qu’habituellement. Nos équipes sont pleinement mobilisées et nous mettons tout en œuvre pour livrer nos clients au plus vite, en particulier les clients concernés.
En revanche les livraisons des services Public cloud, Web Cloud, VPS sont nominales sur tous les datacentres.

Priorité #3 : mise en œuvre avec nos clients de tous les mécanismes de PRA (plan de reprise d’activité)

• Nos équipes Support et nos Technical Account Managers sont en lien avec nos clients et ont mis en place un plan d’assistance destiné à ceux n’ayant pas encore activé leur PRA.

Communication

• La plateforme communautaire OVHcloud Community est disponible pour interagir avec les membres de la communauté et vous accompagner.

• Une FAQ est toujours disponible ici.

• Pour suivre l’évolution de la situation en temps réel :
o notre principal canal de communication reste notre espace « Tâches travaux »
o des vidéos de statut sont disponibles ici :
- FR : https://twitter.com/olesovhcom/status/1370045226929299461
- EN : https://twitter.com/olesovhcom/status/1370045891806175232

o Le compte Twitter d’Octave Klaba : https://twitter.com/olesovhcom
o OVHcloud sur Twitter : https://twitter.com/ovhcloud_fr

Notre mission reste de fournir à nos clients la plus haute qualité de service, pour soutenir leur activité en ligne. Et nous savons combien cela est important pour eux. Nous leur présentons nos sincères excuses pour les inconvénients relatifs à cette situation. Une enquête est en cours sur la cause de celle-ci. Quelle que soit son origine, OVHcloud évalue actuellement les mesures techniques et opérationnelles potentielles visant à apporter des solutions aux clients touchés.

Tous nos canaux de communication, à commencer par notre plateforme de suivi d’incidents, sont accessibles pour vous tenir informés en temps réel sur l’évolution de la situation.


Comment by OVH - Friday, 19 March 2021, 16:45PM

Customer information:

Priority 1: restoring services to SBG1, SBG3 and SBG4

1. Service Status

• SBG4: the datacentre is fully operational.

• SBG1: all racks of servers that have been cleaned are operational (60 racks).

• SBG3: the first racks in SBG3 have been put in service today.

Real-time monitoring of the restart of SBG by room and rack is available at: http://status.ovh.com/vms/sbg/

• Status summary for each datacentre

SBG-1
- Situation : Datacentre operational.
- Electrical restart : Accomplished
- Network restart : Accomplished
- Server restart : All of the servers in the cleaned racks are operational (60 racks).
-----
SBG-2
- Situation : Building out of use. Structural expertise carried out. Site secured
- Server restart : Infrastructure replacement in other data centres Gravelines (GRA), Roubaix (RBX), London (LON), Warsaw (WAW), Frankfurt (FRA)
-----
SBG-3
- Situation : Datacentre operational
- Electrical restart : Accomplished
- Network restart : Accomplished
- Server restart : First racks in service today, Friday March 19.
-----
SBG-4
- Situation : Datacentre operational
- Electrical restart : Accomplished
- Network restart : Accomplished
- Server restart : 100% of the racks are operational (80 racks).

• SBG Service Status Pages - OVHcloud Control Panel
A view per datacentre is available per service in the Control Panel.

2 - Commercial actions
• At the beginning of the week, all customers concerned received a communication on the commercial measures that will be applied to their situation. For customers who have not received the email, a procedure has been indicated in the FAQ.

Priority 2: Provisioning of infrastructure for our customers in other datacentres

• For customers who have been impacted, we are offering replacement infrastructures (Bare Metal, Hosted Private Cloud and Public Cloud) in our other datacentres in Gravelines (GRA), Roubaix (RBX), Londres (LON), Warsaw (WAW), and Francfort (FRA).

• We are committed to providing nearly 15,000 new servers to our customers in the coming weeks.

• 430 servers will be produced today.

Update on quantities delivered since 10th March:

Cloud Universe :
- Baremetal
+Bare Metal - servers - Quantity : 4844
+NAS-HA - TB - Quantity : 259
- Public Cloud
+VPS - VM - Quantity : 13519
- Hosted Private Cloud
+Host - servers - Quantity : 538
+Datastore
+Number of Zpool : 583
+Volume of TB : 3429

Due to the current demand, delivery times on our Bare Metal services may be longer than usual. Our teams are fully mobilised, and we are working hard to deliver to our customers as quickly as possible, especially all affected customers.
On the other hand, Public Cloud, Web Cloud and VPS services are being delivered as normal in all datacentres.


Priority 3: Implementing all DRP (Disaster Recovery Plan) mechanisms with our customers

• Our Support teams and Technical Account Managers are in contact with our customers, and have set up a support plan for customers who have not yet activated their DRP.

Communications

• The OVHcloud Community platform is now available to interact with community members and support you.

• An FAQ is available here => https://help.ovhcloud.com/en-gb/faq/strasbourg-incident/

• To follow updates about this situation in real time:
o Our main communication tool remains "Task Status "
o Status videos are available here:
- FR: https://twitter.com/olesovhcom/status/1370045226929299461
- EN: https://twitter.com/olesovhcom/status/1370045891806175232

o A new video will be posted today on Octave Klaba's Twitter account: https://twitter.com/olesovhcom
o OVHcloud Twitter: https://twitter.com/ovhcloud_fr


Our mission remains to provide our customers with the highest quality of service, to support their online business and we know how important this is to them. We sincerely apologise any inconveniences related to this situation An investigation into the cause is underway. Whatever the cause of the incident, OVHcloud is currently evaluating potential technical and operational measures to bring solutions to all affected customers.

All of our communication channels, including our incident tracking platform, can be accessed so that you can stay informed of developments in real time.


--------------------

Informations client :

Priorité #1 : rétablissement des services sur SBG1, SBG3 et SBG4.

1. Statut des services

• SBG4 : le datacentre est totalement opérationnel.

• SBG1 : toutes les baies des serveurs nettoyés sont opérationnelles (60 baies).

• SBG3 : les premières baies sur SBG3 sont mises en service ce jour.

• Le suivi en temps réel du redémarrage de SBG par salle et par baie est accessible via : http://status.ovh.com/vms/sbg/

• Tableau récapitulatif du statut de chaque datacentre


SBG-1
- Situation : Datacentre opérationnel.
- Redémarrage électrique : Réalisé
- Redémarrage Réseau : Réalisé
- Redémarrage des Serveurs : Toutes les baies des serveurs nettoyés sont opérationnelles (60 baies).

-----
SBG-2
- Situation : Bâtiment hors d’usage. Expertise structure effectuée. Site mis en sécurité.
- Redémarrage des Serveurs : Remplacement des infrastructures sur d’autres datacenters : Gravelines (GRA), Roubaix (RBX), Londres (LON), Varsovie (WAW), Francfort (FRA)
-----
SBG-3
- Situation : Datacentre opérationnel.
- Redémarrage électrique : Réalisé
- Redémarrage Réseau :Réalisé
- Redémarrage des Serveurs : Premières baies mises en service ce jour, vendredi 19 mars.
-----
SBG-4
- Situation : Datacentre opérationnel.
- Redémarrage électrique : Réalisé
- Redémarrage Réseau : Réalisé
- Redémarrage des Serveurs : 100% des baies sont opérationnelles (80 baies).

• Pages états des services SBG – Espace client
Une vue par datacentre est disponible par service dans l’espace client.


2. Mesures commerciales

• Tous les clients concernés ont reçu, en début de semaine, une communication sur les mesures commerciales qui seront appliquées à leur situation. Pour les clients qui n’auraient pas reçu le mail une procédure a été indiquée dans la FAQ.

Priorité #2 : mise à disposition d’infrastructures pour nos clients affectés dans d’autres datacentres

• Nous proposons aux clients concernés une infrastructure de remplacement (Bare Metal, Hosted Private Cloud et Public Cloud) dans nos autres datacentres de Gravelines (GRA), Roubaix (RBX), Londres (LON), Varsovie (WAW) et Francfort (FRA).

• Nous nous engageons à mettre près de 15 000 nouveaux serveurs à disposition de nos clients dans les prochaines semaines.

• 430 serveurs seront produits ce jour.

Point sur les quantités livrées depuis le 10/03 :

Cloud Universe :
- Baremetal
+Bare Metal - servers - Quantity : 4844
+NAS-HA - TB - Quantity : 259
- Public Cloud
+VPS - VM - Quantity : 13519
- Hosted Private Cloud
+Host - servers - Quantity : 538
+Datastore
+Number of Zpool : 583
+Volume of TB : 3429

En raison de la demande actuelle, les délais de livraison sur nos services Bare Metal peuvent être plus long qu’habituellement. Nos équipes sont pleinement mobilisées et nous mettons tout en œuvre pour livrer nos clients au plus vite, en particulier les clients concernés.
En revanche les livraisons des services Public cloud, Web Cloud, VPS sont nominales sur tous les datacentres.

Priorité #3 : mise en œuvre avec nos clients de tous les mécanismes de PRA (plan de reprise d’activité)

• Nos équipes Support et nos Technical Account Managers sont en lien avec nos clients et ont mis en place un plan d’assistance destiné à ceux n’ayant pas encore activé leur PRA.

Communication

• La plateforme communautaire OVHcloud Community (https://community.ovh.com/) est disponible pour interagir avec les membres de la communauté et vous accompagner.

• Une FAQ est toujours disponible ici => https://help.ovhcloud.com/fr/faq/incendie-strasbourg/.

• Pour suivre l’évolution de la situation en temps réel :
o notre principal canal de communication reste notre espace « Tâches travaux »
o des vidéos de statut sont disponibles ici :
- FR : https://twitter.com/olesovhcom/status/1371908744775360518
- EN : https://twitter.com/olesovhcom/status/1371934994751500288
o Une nouvelle vidéo sera publiée ce jour sur le compte Twitter d’Octave Klaba : https://twitter.com/olesovhcom
o OVHcloud sur Twitter : https://twitter.com/ovhcloud_fr

Notre mission reste de fournir à nos clients la plus haute qualité de service, pour soutenir leur activité en ligne. Et nous savons combien cela est important pour eux. Nous leur présentons nos sincères excuses pour les inconvénients relatifs à cette situation. Une enquête est en cours sur la cause de celle-ci. Quelle que soit son origine, OVHcloud évalue actuellement les mesures techniques et opérationnelles potentielles visant à apporter des solutions aux clients touchés.

Tous nos canaux de communication, à commencer par notre plateforme de suivi d’incidents, sont accessibles pour vous tenir informés en temps réel sur l’évolution de la situation.


Comment by OVH - Friday, 19 March 2021, 22:54PM

Today at 6:50 pm CET, our teams on site have identified smoke in an unconnected battery room at SBG1.

The fire department was immediately contacted. In regards to the situation, we decided to apply the precautionary principle: the power supply of SBG1 and SBG4 was immediately cut off. Operations on site were temporarily interrupted, all OVHcloud and all partner teams were asked to return home. Only the security, fire safety and maintenance staff remained on site.

Once on site, firefighters identified the source in the battery room, and the incident was contained within minutes. No injuries were reported among our teams or our partners. As a precautionary measure, two security people who were affected by the smoke were examined by medical professionals.

The situation is under control and we are adapting the operations schedule for the coming day.

-------------------

Ce soir à 18:50, nos équipes sur place et notre système de détection incendie ont identifié une fumée dans un local batteries non raccordé et non utilisé et non connectées de SBG1.

Les pompiers ont été immédiatement contactés. Au regard de la situation, la direction d'OVHcloud a pris la décision d'appliquer le principe de précaution : l'alimentation électrique de SBG1 et SBG4 a immédiatement été coupée. Les opérations sur site ont été temporairement interrompues, tout le personnel OVHcloud et l'ensemble des équipes partenaires ont été priés de rejoindre leur domicile, seul le personnel de sécurité, de sécurité incendie et de maintenance est restés sur place.

Une fois sur place, les pompiers ont identifié la source dans le local batterie, et l'incident a été circonscrit en quelques minutes par les pompiers et aucun blessé n'est à déplorer parmi les équipes d'OVHcloud ou de ses partenaires. Par précaution, deux personnes de la sécurité ayant été incommodées par les fumées ont été examinées par des professionnels de santé.

La situation est sous contrôle et nous adaptons le planning des opérations pour la journée à venir.


Comment by OVH - Saturday, 20 March 2021, 11:41AM

SBG1 datacenter is currently closed and secured.
SBG2 datacenter is closed and secured.
SBG4 datacenter is closed and secured as a precautionary measure.

The recovery scenario will be defined during the weekend for SBG1 and SBG4 data centers, always focusing on security.

SBG3 is partially restored:
Teams continue to work on the SBG3 data center, as of today, respecting security measures.

============================

Le datacentre SBG1 est fermé et mis en sécurité l’heure actuelle.
Le datacentre SBG2 est fermé et mis en sécurité.
Le datacentre SBG4 est fermé et également mis en sécurité par mesure de précaution.

Le scenario de reprise sera défini pendant le week-end pour les datacentres SBG1 et SBG4 en privilégiant toujours la sécurité.

SBG3 est partiellement rétabli :
Les équipes continuent le travail sur le datacentre SBG3, dès aujourd’hui, en respectant les mesures de sécurité.


Comment by OVH - Saturday, 20 March 2021, 20:59PM

Customer information:

Yesterday evening, on Friday 19 March at 18:50 CET, our on-site teams detected smoke in an unconnected battery room in SBG1 (see situation report dated 19 March 22:55). The situation has been brought under control and we are adjusting the operations schedule for the weekend as shown below.

Priority 1: restoring services to SBG1, SBG3 and SBG4

1. Service status as of 20 March 2021 - 20:00

• Real-time monitoring of the restart of SBG by room and rack is available at: http://status.ovh.com/vms/sbg/
- As a precautionary measure, we decided to take the following actions:
- The SBG1 datacentre has been switched off and secured.
- The SBG2 datacentre has been switched off and secured.
- The SBG4 datacentre is operational, but has been switched off and also secured.
- The restart scenario is being reviewed this weekend for the SBG1 and SBG4 datacentres.
- SBG3 is partially restored:
• The teams are continuing to work on the SBG3 datacentre from today, while following security measures.

• Status summary for each datacentre

SBG-1
- Situation : Datacentre switched off and secured.
- Network restart : Switched off as a precaution
- Server restart : Replacement of infrastructure in other datacentres: Gravelines (GRA), Roubaix (RBX) and Strasbourg (SBG4).
-----
SBG-2
- Situation : Building out of use. Structural expertise carried out. Site secured
- Server restart : Infrastructure replacement in other data centres Gravelines (GRA), Roubaix (RBX), London (LON), Warsaw (WAW), Frankfurt (FRA)
-----
SBG-3
- Situation : Datacentre operational
- Electrical restart : Accomplished
- Network restart : Accomplished
- Server restart : The teams are still working to restart the services.
-----
SBG-4
- Situation : Datacentre operational but currently switched off and secured as a precautionary measure.
- Electrical restart : Power supply work in progress
- Network restart : Switched off as a precaution
- Server restart : We are devising a restart scenario, with security as our primary concern.

• SBG Service Status Pages - OVHcloud Control Panel
A view per datacentre is available per service in the Control Panel.

2. Commercial actions
• At the beginning of the week, all customers concerned received a communication on the commercial measures that will be applied to their situation. For customers who have not received the email, a procedure has been indicated in the FAQ.

Priority 2: Provisioning of infrastructure for our customers in other datacentres

• For customers who have been impacted, we are offering replacement infrastructures (Bare Metal, Hosted Private Cloud and Public Cloud) in our other datacentres in Gravelines (GRA), Roubaix (RBX), Londres (LON), Warsaw (WAW), and Francfort (FRA).
• We are committed to providing nearly 15,000 new servers to our customers in the coming weeks.

Update on quantities delivered since 10th March:


Cloud Universe :
- Baremetal
+Bare Metal - servers - Quantity : 5250
+NAS-HA - TB - Quantity : 259
- Public Cloud
+VPS - VM - Quantity : 13985
- Hosted Private Cloud
+Host - servers - Quantity : 612
+Datastore
+Number of Zpool : 747
+Volume of TB : 3702


Due to the current demand, delivery times on our Bare Metal services may be longer than usual. Our teams are fully mobilised, and we are working hard to deliver to our customers as quickly as possible, especially all affected customers.
On the other hand, Public Cloud, Web Cloud and VPS services are being delivered as normal in all datacentres.


Priority 3: Implementing all DRP (Disaster Recovery Plan) mechanisms with our customers

• Our Support teams and Technical Account Managers are in contact with our customers, and have set up a support plan for customers who have not yet activated their DRP.

Communications

• The OVHcloud Community platform (https://community.ovh.com/en/) is now available to interact with community members and support you.

• An FAQ is available here => https://help.ovhcloud.com/en/faq/strasbourg-incident/
• To follow updates about this situation in real time:
o Our main communication tool remains "Task Status "
o Status videos are available here:
- FR: https://twitter.com/olesovhcom/status/1371908744775360518
- EN: https://twitter.com/olesovhcom/status/1371934994751500288
o Octave Klaba’s Twitter account: https://twitter.com/olesovhcom
o OVHcloud Twitter: https://twitter.com/ovhcloud


Our mission remains to provide our customers with the highest quality of service, to support their online business. and we know how important this is to them. We sincerely apologise any inconveniences related this situation An investigation into the cause is underway. Whatever the cause of the incident, OVHcloud is currently evaluating potential technical and operational measures to bring solutions to all affected customers.

All of our communication channels, including our incident tracking platform, can be accessed so that you can stay informed of developments in real time.

----------------------

Informations client :

Hier soir, vendredi 19 mars à 18h50, nos équipes sur place ont identifié une fumée dans un local batteries non raccordées de SBG1 (cf. point de situation du 19 mars 22h55). La situation a été maîtrisée et nous adaptons le planning des opérations pour le week-end comme indiqué ci-dessous.

Priorité #1 : rétablissement des services sur SBG1, SBG3 et SBG4.

1. Statut des services au 20/03/2021 – 20h

• Le suivi en temps réel du redémarrage de SBG par salle et par baie est accessible via : http://status.ovh.com/vms/sbg/
- Par mesure de précaution nous avons décidé des actions suivantes :
- Le datacentre SBG1 est arrêté et mis en sécurité.
- Le datacentre SBG2 est arrêté et mis en sécurité.
- Le datacentre SBG4 est opérationnel mais arrêté et également et mis en sécurité.
- Le scenario de reprise est en cours de redéfinition ce week-end pour les datacentres SBG1 et SBG4.
- SBG3 est partiellement rétabli :

• Les équipes continuent le travail sur le datacentre SBG3, dès aujourd’hui, en respectant les mesures de sécurité.

SBG-1
- Situation : Datacentre arrêté et mis en sécurité.
- Redémarrage Réseau : Arrêt par précaution
- Redémarrage des Serveurs : Remplacement des infrastructures sur d’autres datacentres : Gravelines (GRA), Roubaix (RBX) et Strasbourg (SBG4).

-----
SBG-2
- Situation : Bâtiment hors d’usage. Expertise structure effectuée. Site mis en sécurité.
- Redémarrage des Serveurs : Remplacement des infrastructures sur d’autres datacenters : Gravelines (GRA), Roubaix (RBX), Londres (LON), Varsovie (WAW), Francfort (FRA)
-----
SBG-3
- Situation : Datacentre opérationnel.
- Redémarrage électrique : Réalisé
- Redémarrage Réseau :Réalisé
- Redémarrage des Serveurs : Les équipes continuent à œuvrer pour le redémarrage des services.
-----
SBG-4
- Situation : Datacentre opérationnel mais actuellement arrêté et mis en sécurité par mesure de précaution.
- Redémarrage électrique : Ré-énergisation en cours.
- Redémarrage Réseau : Arrêt par précaution
- Redémarrage des Serveurs : Le scenario de reprise est en cours de définition en privilégiant toujours la sécurité.

• Pages états des services SBG – Espace client
Une vue par datacentre est disponible par service dans l’espace client.

2. Mesures commerciales

• Tous les clients concernés ont reçu, en début de semaine, une communication sur les mesures commerciales qui seront appliquées à leur situation. Pour les clients qui n’auraient pas reçu le mail une procédure a été indiquée dans la FAQ => https://help.ovhcloud.com/fr/faq/strasbourg-incident/email-not-received/


Priorité #2 : mise à disposition d’infrastructures pour nos clients affectés dans d’autres datacentres

• Nous proposons aux clients concernés une infrastructure de remplacement (Bare Metal, Hosted Private Cloud et Public Cloud) dans nos autres datacentres de Gravelines (GRA), Roubaix (RBX), Londres (LON), Varsovie (WAW) et Francfort (FRA).

• Nous nous engageons à mettre près de 15 000 nouveaux serveurs à disposition de nos clients dans les prochaines semaines.

Point sur les quantités livrées depuis le 10/03 :

Cloud Universe :
- Baremetal
+Bare Metal - servers - Quantity : 5250
+NAS-HA - TB - Quantity : 259
- Public Cloud
+VPS - VM - Quantity : 13985
- Hosted Private Cloud
+Host - servers - Quantity : 612
+Datastore
+Number of Zpool : 747
+Volume of TB : 3702

En raison de la demande actuelle, les délais de livraison sur nos services Bare Metal peuvent être plus long qu’habituellement. Nos équipes sont pleinement mobilisées et nous mettons tout en œuvre pour livrer nos clients au plus vite, en particulier les clients concernés.
En revanche les livraisons des services Public cloud, Web Cloud, VPS sont nominales sur tous les datacentres.


Priorité #3 : mise en œuvre avec nos clients de tous les mécanismes de PRA (plan de reprise d’activité)

• Nos équipes Support et nos Technical Account Managers sont en lien avec nos clients et ont mis en place un plan d’assistance destiné à ceux n’ayant pas encore activé leur PRA.

Communication

• La plateforme communautaire OVHcloud Community (https://community.ovh.com/) est disponible pour interagir avec les membres de la communauté et vous accompagner.

• Une FAQ est toujours disponible ici => https://help.ovhcloud.com/fr/faq/incendie-strasbourg/

• Pour suivre l’évolution de la situation en temps réel :
o notre principal canal de communication reste notre espace « Tâches travaux »
o des vidéos de statut sont disponibles ici :
- FR : https://twitter.com/olesovhcom/status/1371908744775360518
- EN : https://twitter.com/olesovhcom/status/1371934994751500288
o Compte Twitter d’Octave Klaba : https://twitter.com/olesovhcom
o OVHcloud sur Twitter : https://twitter.com/ovhcloud_fr


Notre mission reste de fournir à nos clients la plus haute qualité de service, pour soutenir leur activité en ligne. Et nous savons combien cela est important pour eux. Nous leur présentons nos sincères excuses pour les inconvénients relatifs à cette situation. Une enquête est en cours sur la cause de celle-ci. Quelle que soit son origine, OVHcloud évalue actuellement les mesures techniques et opérationnelles potentielles visant à apporter des solutions aux clients touchés.

Tous nos canaux de communication, à commencer par notre plateforme de suivi d’incidents, sont accessibles pour vous tenir informés en temps réel sur l’évolution de la situation.



Comment by OVH - Sunday, 21 March 2021, 20:06PM

• In the SBG3 datacentre, the teams are continuing to work around the clock to gradually reactivate the services.

• Current status of services located in SBG3:

Public Cloud
+ Public Cloud Instance : Reboot - 22 March
Hosted Private Cloud
+ Hosted Private Cloud : Reboot - 22 March
Bare Metal Cloud
+ VPS : 68%
+ Bare Metal : 21%

• Real-time monitoring of the restart of SBG by room and rack is available at: http://status.ovh.com/vms/sbg/

• At the beginning of the week, all customers concerned received a communication on the commercial measures that will be applied to their situation. You can find a dedicated section about this in the FAQ (https://help.ovhcloud.com/en-gb/faq/strasbourg-incident/commercial-measures/).


Priority 1: restoring services to our customers

• Status summary for each datacentre

SBG-1
- Situation : Inspection and expert assessments in progress.
- Network restart : Switched off as a precaution
- Server restart : Moving servers to other datacentres (Gravelines (GRA), Roubaix (RBX) and Strasbourg (SBG4)) before services are restarted
-----
SBG-2
- Situation : Datacentre switched off and secured.
- Server restart : Infrastructure replacement in other data centres Gravelines (GRA), Roubaix (RBX), London (LON), Warsaw (WAW), Frankfurt (FRA)
-----
SBG-3
- Situation : Datacentre operational
- Electrical restart : Accomplished
- Network restart : Accomplished
- Server restart : Bare Metal VPS services are currently being restored. Hosted Private Cloud and Public Cloud services will be restored gradually from tomorrow (see status above).
-----
SBG-4
- Situation : After inspection and verification, this datacentre will be back in service on Wednesday 24 March.
- Electrical restart : Power supply work in progress
- Network restart : Switched off as a precaution
- Server restart : ETA: Wednesday, 24 March.

• SBG Service Status Pages - OVHcloud Control Panel

A view per datacentre is available per service in the Control Panel.

Priority 2: Provisioning of infrastructure for our customers in other datacentres

• For customers who have been impacted, we are offering replacement infrastructures (Bare Metal, Hosted Private Cloud and Public Cloud) in our other datacentres in Gravelines (GRA), Roubaix (RBX), London (LON), Warsaw (WAW), and Frankfurt (FRA).

• We are committed to providing nearly 15,000 new servers to our customers in the coming weeks.

Update on quantities delivered since 10th March:

Cloud Universe :
- Baremetal
+Bare Metal - servers - Quantity : 5558
+NAS-HA - TB - Quantity : 259
- Public Cloud
+VPS - VM - Quantity : 14327
- Hosted Private Cloud
+Host - servers - Quantity : 616
+Datastore
+Number of Zpool : 747
+Volume of TB : 3706

Due to the current demand, delivery times on our Bare Metal services may be longer than usual. Our teams are fully mobilised, and we are working hard to deliver to our customers as quickly as possible, especially all affected customers.
On the other hand, Public Cloud, Web Cloud and VPS services are being delivered as normal in all datacentres.

Priority 3: Implementing all DRP (Disaster Recovery Plan) mechanisms with our customers

• Our Support teams and Technical Account Managers are in contact with our customers and have a support plan in place.

Communications

• The OVHcloud Community platform is now available to interact with community members and support you.

• An FAQ is available here =>https://help.ovhcloud.com/en-gb/faq/strasbourg-incident/ .

• To follow updates about this situation in real time:
o Our main communications feed: Task Status.
o Octave Klaba’s Twitter account: https://twitter.com/olesovhcom
o OVHcloud Twitter: https://twitter.com/ovhcloud

Our mission remains to provide our customers with the highest quality of service to support their online business. We know how important this is to them. We sincerely apologise for any inconveniences related to this situation. An investigation into the cause is underway. Whatever the cause of the incident, OVHcloud is currently evaluating potential technical and operational measures to bring solutions to all affected customers.

All of our communication channels, including our incident tracking platform, can be accessed so that you can stay informed of developments in real time.

---------------------------------------------------------------------------

• Sur le datacentre SBG3, les équipes continuent d’œuvrer en 24h/24 à la réactivation progressive des services.

• Statut à date des services localisés à SBG3 :

Public Cloud
+ Public Cloud Instance : Démarrage 22 mars
Hosted Private Cloud
+ Hosted Private Cloud : Démarrage 22 mars
Bare Metal Cloud
+ VPS : 68%
+ Bare Metal : 21%

• Le suivi en temps réel du redémarrage de SBG par salle et par baie est accessible via : http://status.ovh.com/vms/sbg/

• Tous les clients concernés ont reçu, en début de semaine, une communication sur les mesures commerciales qui seront appliquées à leur situation. Vous pouvez retrouver une section dédiée dans la FAQ (https://help.ovhcloud.com/fr/faq/strasbourg-incident/commercial-measures/).

Priorité #1 : rétablissement des services pour nos clients.

• Tableau récapitulatif du statut de chaque datacentre

SBG-1
- Situation : Inspection et expertise en cours.
- Redémarrage Réseau : Arrêt par précaution
- Redémarrage des Serveurs : Déplacement des serveurs sur d’autres datacentres : Gravelines (GRA), Roubaix (RBX) et Strasbourg (SBG4) pour remise en service.
-----
SBG-2
- Situation : Datacentre arrêté et mis en sécurité.
- Redémarrage des Serveurs : Remplacement des infrastructures sur d’autres datacenters : Gravelines (GRA), Roubaix (RBX), Londres (LON), Varsovie (WAW), Francfort (FRA)
-----
SBG-3
- Situation : Datacentre opérationnel.
- Redémarrage électrique : Réalisé
- Redémarrage Réseau :Réalisé
- Redémarrage des Serveurs : Les services VPS Bare Metal ont commencé à être rétablis. Les services Hosted Private Cloud et Public Cloud seront rétablis progressivement partir de demain (voir statut ci-dessus).
-----
SBG-4
- Situation : Après inspection et vérification, ce datacentre sera remis en service mercredi 24 mars.
- Redémarrage électrique : Ré-énergisation en cours.
- Redémarrage Réseau : Arrêt par précaution
- Redémarrage des Serveurs : ETA : mercredi 24 mars.

• Pages états des services SBG – Espace client
Une vue par datacentre est disponible par service dans l’espace client.

Priorité #2 : mise à disposition d’infrastructures pour nos clients affectés dans d’autres datacentres

• Nous proposons aux clients concernés une infrastructure de remplacement (Bare Metal, Hosted Private Cloud et Public Cloud) dans nos autres datacentres de Gravelines (GRA), Roubaix (RBX), Londres (LON), Varsovie (WAW) et Francfort (FRA).

• Nous nous engageons à mettre près de 15 000 nouveaux serveurs à disposition de nos clients dans les prochaines semaines.

Point sur les quantités livrées depuis le 10/03 :

Cloud Universe :
- Baremetal
+Bare Metal - servers - Quantity : 5558
+NAS-HA - TB - Quantity : 259
- Public Cloud
+VPS - VM - Quantity : 14327
- Hosted Private Cloud
+Host - servers - Quantity : 616
+Datastore
+Number of Zpool : 747
+Volume of TB : 3706


En raison de la demande actuelle, les délais de livraison sur nos services Bare Metal peuvent être plus long qu’habituellement. Nos équipes sont pleinement mobilisées et nous mettons tout en œuvre pour livrer nos clients au plus vite, en particulier les clients concernés.
En revanche les livraisons des services Public cloud, Web Cloud, VPS sont nominales sur tous les datacentres.


Priorité #3 : mise en œuvre avec nos clients de tous les mécanismes de PRA (plan de reprise d’activité)

• Nos équipes Support et nos Technical Account Managers sont en lien avec nos clients et ont mis en place un plan d’assistance.

Communication

• La plateforme communautaire OVHcloud Community (https://community.ovh.com/ est disponible pour interagir avec les membres de la communauté et vous accompagner.

• Une FAQ est toujours disponible ici => https://help.ovhcloud.com/fr/faq/incendie-strasbourg/

• Pour suivre l’évolution de la situation en temps réel :
o notre principal canal de communication reste notre espace « Travaux ».
o le compte Twitter d’Octave Klaba, fondateur d’OVHcloud : https://twitter.com/olesovhcom
o le compte Twitter OVHcloud : https://twitter.com/ovhcloud_fr


Notre mission reste de fournir à nos clients la plus haute qualité de service, pour soutenir leur activité en ligne. Et nous savons combien cela est important pour eux. Nous leur présentons nos sincères excuses pour les inconvénients relatifs à cette situation. Une enquête est en cours sur la cause de celle-ci. Quelle que soit son origine, OVHcloud évalue actuellement les mesures techniques et opérationnelles potentielles visant à apporter des solutions aux clients touchés.

Tous nos canaux de communication, à commencer par notre plateforme de suivi d’incidents, sont accessibles pour vous tenir informés en temps réel sur l’évolution de la situation.


Comment by OVH - Monday, 22 March 2021, 17:51PM

Customer information:

• SBG3 is fully operational, below is the status of the services located in this datacentre:

Public Cloud :
+ Public Cloud Instance - Progressive restart of services beginning 22 March with a schedule spread throughout the entire week, including weekends.

Hosted Private Cloud : Progressive restart of services from 22 March, depending on the initial configuration of the services, schedule spread throughout the entire week, including weekends.

Bare Metal Cloud :
+ VPS : 79%
+ Bare Metal : 55%


• Public Cloud customers have been informed by email of the gradual restart of their services on Monday 22 March.

• Bare Metal customers (hosted in SBG4) have been informed by email that their services will be restarted from Wednesday 24 March.

• Real-time monitoring of the restart of SBG by room and rack is available at: http://status.ovh.com/vms/sbg/

• At the beginning of the week, all customers concerned received a communication on the commercial measures that will be applied to their situation. You can find a dedicated section about this in the FAQ (https://help.ovhcloud.com/en-gb/faq/strasbourg-incident/commercial-measures/).


Priority 1: Restoring services to our customers

• Status summary for each datacentre

SBG-1
- Situation : Data centre not reactivated. After inspection by teams with expertise, technical teams can access the rooms.
- Network restart : Switched off as a precaution
- Server restart : Relocation of SBG1 servers
to our other datacentres: Gravelines (GRA), Roubaix (RBX), Croix (CRX) and Strasbourg (SBG4) to return to service. ETA: Wednesday 24 March.
-----
SBG-2
- Situation : Datacentre switched off and secured.
- Server restart : Replacement of infrastructure in other datacentres: Gravelines (GRA), Roubaix (RBX), London (LON), Warsaw (WAW), Frankfurt (FRA)
-----
SBG-3
- Situation : Datacentre operational since 18 March
- Electrical restart : Accomplished
- Network restart : Accomplished
- Server restart : VPS and Bare Metal services started to be restored on 21/03. Hosted Private Cloud and Public Cloud services will be gradually restored starting today.
-----
SBG-4
- Situation : The datacentre will be operational on Wednesday 24 March.
- Electrical restart : Power restoration planned for the evening of March 24.
- Network restart : Network restart Wednesday 24 March:
- Server restart : ETA: Wednesday, 24 March.

• SBG Service Status Pages - OVHcloud Control Panel
A view per datacentre is available per service in the Control Panel.

Priority 2: Provisioning of infrastructure for our customers in other datacentres

• For customers who have been impacted, we are offering replacement infrastructures (Bare Metal, Hosted Private Cloud and Public Cloud) in our other datacentres in Gravelines (GRA), Roubaix (RBX), Londres (LON), Warsaw (WAW), and Frankfurt (FRA).

• We are committed to providing nearly 15,000 new servers to our customers in the coming weeks.

Update on quantities delivered since 10th March:

Cloud Universe :
- Baremetal
+Bare Metal - servers - Quantity : 5558
+NAS-HA - TB - Quantity : 259
- Public Cloud
+VPS - VM - Quantity : 14327
- Hosted Private Cloud
+Host - servers - Quantity : 616
+Datastore
+Number of Zpool : 747
+Volume of TB : 3706

Due to the current demand, delivery times on our Bare Metal services may be longer than usual. Our teams are fully mobilised, and we are working hard to deliver to our customers as quickly as possible, especially all affected customers.
On the other hand, Public Cloud, Web Cloud and VPS services are being delivered as normal in all datacentres.

Priority 3: Implementing all DRP (Disaster Recovery Plan) mechanisms with our customers

• Our Support teams and Technical Account Managers are in contact with our customers and have a support plan in place.

Communications

• Octave Klaba, founder of OVHcloud, has uploaded a new video to his Twitter account today => https://twitter.com/olesovhcom/status/1374069154085490690

• The OVHcloud Community platform (https://community.ovh.com/en/) is now available to interact with community members and support you.

• An FAQ is available here.

• To follow updates about this situation in real time:
o Our main communications feed: Task Status
o Octave Klaba’s Twitter account: https://twitter.com/olesovhcom
o OVHcloud Twitter: https://twitter.com/ovhcloud


Our mission remains to provide our customers with the highest quality of service and to support their online business and we know how important this is to them. We sincerely apologise for the problems caused by this fire. We will continue to communicate with the utmost transparency about the cause of the fire and its consequences.

An investigation is ongoing. Whatever the cause of the incident, OVHcloud is currently evaluating potential technical and operational measures to bring solutions to all affected customers. All of our communication channels, including our incident tracking platform, can be accessed so that you can stay informed of developments in real time.


-----------------------------------------

Informations client :

• SBG3 est pleinement opérationnel, ci-dessous le statut des services localisés dans ce datacentre :

Public Cloud :
+ Public Cloud Instance - Redémarrage progressif des services à partir du 22 mars avec un planning s’étalant sur toute cette semaine y compris le week-end.

Hosted Private Cloud :Redémarrage progressif des services à partir du 22 mars, dépendant de la configuration initiale des services, avec un planning s’étalant sur toute cette semaine y compris le week-end.

Bare Metal Cloud :
+ VPS : 79%
+ Bare Metal : 55%


• Les clients Public Cloud ont été informés par mail du redémarrage progressif de leurs services au lundi 22 mars.

• Les clients Bare Metal (hébergés à SBG4) ont été informés par mail du redémarrage de leurs services à partir du mercredi 24 mars.

• Le suivi en temps réel du redémarrage de SBG par salle et par baie est accessible via : http://status.ovh.com/vms/sbg/


• Tous les clients concernés ont reçu, en début de semaine, une communication sur les mesures commerciales qui seront appliquées à leur situation. Vous pouvez retrouver une section dédiée dans la FAQ (https://help.ovhcloud.com/fr/faq/strasbourg-incident/commercial-measures/).


Priorité #1 : rétablissement des services pour nos clients


• Tableau récapitulatif du statut de chaque datacentre

SBG-1
- Situation : Datacentre non remis en service. Après inspection et expertise, les équipes techniques peuvent accéder aux salles.
- Redémarrage Réseau : Arrêt par précaution
- Redémarrage des Serveurs : Déplacement des serveurs sur d’autres datacentres : Gravelines (GRA), Roubaix (RBX) et Strasbourg (SBG4) pour remise en service. ETA : mercredi 24 mars
-----
SBG-2
- Situation : Datacentre arrêté et mis en sécurité.
- Redémarrage des Serveurs : Remplacement des infrastructures sur d’autres datacenters : Gravelines (GRA), Roubaix (RBX), Londres (LON), Varsovie (WAW), Francfort (FRA)
-----
SBG-3
- Situation : Datacentre opérationnel depuis le 18/03.
- Redémarrage électrique : Réalisé
- Redémarrage Réseau :Réalisé
- Redémarrage des Serveurs : Les services VPS et Bare Metal ont commencé à être rétablis le 21/03. Les services Hosted Private Cloud et Public Cloud seront rétablis progressivement partir d’aujourd’hui.
-----
SBG-4
- Situation : Le datacentre sera opérationnel le mercredi 24 mars.
- Redémarrage électrique : Ré-énergisation planifiée le 24 mars au soir.
- Redémarrage Réseau : Redémarrage réseau Mercredi 24 mars.
- Redémarrage des Serveurs : ETA : mercredi 24 mars.


• Pages états des services SBG – Espace client
Une vue par datacentre est disponible par service dans l’espace client.

Priorité #2 : mise à disposition d’infrastructures pour nos clients affectés dans d’autres datacentres

• Nous proposons aux clients concernés une infrastructure de remplacement (Bare Metal, Hosted Private Cloud et Public Cloud) dans nos autres datacentres de Gravelines (GRA), Roubaix (RBX), Londres (LON), Varsovie (WAW) et Francfort (FRA).

• Nous nous engageons à mettre près de 15 000 nouveaux serveurs à disposition de nos clients dans les prochaines semaines.

Point sur les quantités livrées depuis le 10/03 :

Cloud Universe :
- Baremetal
+Bare Metal - servers - Quantity : 5767
+NAS-HA - TB - Quantity : 259
- Public Cloud
+VPS - VM - Quantity : 14598
- Hosted Private Cloud
+Host - servers - Quantity : 616
+Datastore
+Number of Zpool : 747
+Volume of TB : 3706

En raison de la demande actuelle, les délais de livraison sur nos services Bare Metal peuvent être plus long qu’habituellement. Nos équipes sont pleinement mobilisées et nous mettons tout en œuvre pour livrer nos clients au plus vite, en particulier les clients concernés.
En revanche les livraisons des services Public cloud, Web Cloud, VPS sont nominales sur tous les datacentres.

Priorité #3 : mise en œuvre avec nos clients de tous les mécanismes de PRA (plan de reprise d’activité)

• Nos équipes Support et nos Technical Account Managers sont en lien avec nos clients et ont mis en place un plan d’assistance.

Communication

• Une nouvelle vidéo d’Octave Klaba, fondateur d’OVHcloud, sera mise en ligne ce jour sur son compte Twitter via ce lien => https://twitter.com/olesovhcom/status/1374038409707188231

• La plateforme communautaire OVHcloud Community (https://community.ovh.com/) est disponible pour interagir avec les membres de la communauté et vous accompagner.

• Une FAQ est toujours disponible ici.

• Pour suivre l’évolution de la situation en temps réel :
o Notre principal canal de communication reste notre espace « Travaux ».
o Le compte Twitter d’Octave Klaba, fondateur d’OVHcloud : https://twitter.com/olesovhcom
o Le compte Twitter OVHcloud : https://twitter.com/ovhcloud_fr


Notre mission reste de fournir à nos clients la plus haute qualité de service, pour soutenir leur activité en ligne. Et nous savons combien cela est important pour eux. Nous leur présentons nos sincères excuses pour les inconvénients relatifs à cette situation. Une enquête est en cours sur la cause de celle-ci. Quelle que soit son origine, OVHcloud évalue actuellement les mesures techniques et opérationnelles potentielles visant à apporter des solutions aux clients touchés.

Tous nos canaux de communication, à commencer par notre plateforme de suivi d’incidents, sont accessibles pour vous tenir informés en temps réel sur l’évolution de la situation.


Comment by OVH - Tuesday, 23 March 2021, 18:07PM


Customer information:

• SBG3 is fully operational, below is the status of the services located in this datacentre:

Public Cloud :
+ Public Cloud Instance - 86%

Hosted Private Cloud : Services are being gradually restarted, depending on their initial configuration, on an around the clock, 24/7, rotation schedule.

Bare Metal Cloud :
+ VPS : 79%
+ Bare Metal : 71%

The restoration of services is carried out according to a restart schedule room by room, aisle by aisle and rack by rack. As the safety of our technical teams must be guaranteed, this schedule is conditioned by the safety protocol defined for on-site interventions.

• Real-time monitoring of the restart of SBG by room and rack is available at: http://status.ovh.com/vms/sbg/

• At the beginning of the week, all customers concerned received a communication on the commercial measures that will be applied to their situation. You can find a dedicated section about this in the FAQ(https://help.ovhcloud.com/en-gb/faq/strasbourg-incident/commercial-measures/).

Priority 1: Restoring services to our customers

• Status summary for each datacentre

SBG-1
- Situation : Datacentre not reactivated. After inspection by teams with expertise, technical teams can access the rooms.
- Network restart : Switched off as a precaution
- Server restart : Relocation of SBG1 servers to our other datacentres: Gravelines (GRA), Roubaix (RBX), Croix (CRX) and Strasbourg (SBG4) to return to service. ETA: Wednesday 24 March.
-----
SBG-2
- Situation : Datacentre switched off and secured.
- Server restart : Replacement of infrastructure in other datacentres: Gravelines (GRA), Roubaix (RBX), London (LON), Warsaw (WAW), Frankfurt (FRA)
-----
SBG-3
- Situation : Datacentre operational since 18 March
- Electrical restart : Accomplished
- Network restart : Accomplished
- Server restart : VPS, Bare Metal, and Public Cloud services are currently being restored. Hosted Private Cloud services will be restored gradually.
-----
SBG-4
- Situation : The datacentre will be operational on Wednesday 24 March.
- Electrical restart : Power restored this evening 23 March.
- Network restart : Network restart 24 March
- Server restart : ETA: Wednesday, 25 March.

• SBG Service Status Pages - OVHcloud Control Panel
A view per datacentre is available per service in the Control Panel.

Priority 2: Provisioning of infrastructure for our customers in other datacentres

• For customers who have been impacted, we are offering replacement infrastructures (Bare Metal, Hosted Private Cloud and Public Cloud) in our other datacentres in Gravelines (GRA), Roubaix (RBX), London (LON), Warsaw (WAW), and Frankfurt (FRA).
• We are committed to providing nearly 15,000 new servers to our customers in the coming weeks.

Update on quantities delivered since 10th March:

Cloud Universe :
- Baremetal
+Bare Metal - servers - Quantity : 6103
+NAS-HA - TB - Quantity : 259
- Public Cloud
+VPS - VM - Quantity : 14973
- Hosted Private Cloud
+Host - servers - Quantity : 640
+Datastore
+Number of Zpool : 662
+Volume of TB : 3764

Due to the current demand, delivery times on our Bare Metal services may be longer than usual. Our teams are fully mobilised, and we are working hard to deliver to our customers as quickly as possible, especially all affected customers.
On the other hand, Public Cloud, Web Cloud and VPS services are being delivered as normal in all datacentres.

Priority 3: Implementing all DRP (Disaster Recovery Plan) mechanisms with our customers

• Our Support teams and Technical Account Managers are in contact with our customers and have a support plan in place.

Communications

• A new video from Octave Klaba, founder of OVHcloud, is available on his Twitter account (https://twitter.com/olesovhcom/status/1374069154085490690).
• The OVHcloud Community platform (https://community.ovh.com/en/) is now available to interact with community members and support you.
• An FAQ is available here (https://help.ovhcloud.com/en-gb/faq/strasbourg-incident/).
• To follow updates about this situation in real time:
o Our main communications feed: Task Status
o Octave Klaba, founder of OVHcloud, Twitter account (https://twitter.com/olesovhcom/status/1374038409707188231).
o OVHcloud Twitter: https://twitter.com/ovhcloud

Our mission remains to provide our customers with the highest quality of service to support their online business and we know how important this is to them. We sincerely apologise any inconveniences related this situation. An investigation into the cause is underway. Whatever the cause of the incident, OVHcloud is currently evaluating potential technical and operational measures to bring solutions to all affected customers.

All of our communication channels, including our incident tracking platform, can be accessed so that you can stay informed of developments in real time.

-----------------------------------------


Informations client :

• SBG3 est pleinement opérationnel, ci-dessous le statut des services localisés dans ce datacentre :

Public Cloud :
+ Public Cloud Instance - 86
Hosted Private Cloud : Redémarrage progressif des services en cours, dépendant de la configuration initiale des services, avec un planning en rotation 7j/7.
Bare Metal Cloud :
+ VPS : 79%
+ Bare Metal : 71%

Le rétablissement des services s’effectue suivant un planning de redémarrage salle par salle, allée par allée et baie par baie. Ce planning est conditionné par le protocole de sécurité défini pour les interventions sur site, la sécurité de nos équipes techniques devant être garantie.

• Le suivi en temps réel du redémarrage de SBG par salle et par baie est accessible via : http://status.ovh.com/vms/sbg/

• Tous les clients concernés ont reçu, en début de semaine, une communication sur les mesures commerciales qui seront appliquées à leur situation. Vous pouvez retrouver une section dédiée dans la FAQ => https://help.ovhcloud.com/fr/faq/strasbourg-incident/commercial-measures/

Priorité #1 : rétablissement des services pour nos clients

• Tableau récapitulatif du statut de chaque datacentre


SBG-1
- Situation : Datacentre non remis en service. Après inspection et expertise, les équipes techniques peuvent accéder aux salles.
- Redémarrage Réseau : Arrêt par précaution
- Redémarrage des Serveurs : Déplacement des serveurs sur d’autres datacentres : Gravelines (GRA), Roubaix (RBX) et Strasbourg (SBG4) pour remise en service. ETA : mercredi 24 mars
-----
SBG-2
- Situation : Datacentre arrêté et mis en sécurité.
- Redémarrage des Serveurs : Remplacement des infrastructures sur d’autres datacenters : Gravelines (GRA), Roubaix (RBX), Londres (LON), Varsovie (WAW), Francfort (FRA)
-----
SBG-3
- Situation : Datacentre opérationnel depuis le 18/03.
- Redémarrage électrique : Réalisé
- Redémarrage Réseau :Réalisé
- Redémarrage des Serveurs : Les services VPS, Bare Metal et Public Cloud ont commencé à être rétablis. Les services Hosted Private Cloud seront rétablis progressivement.
-----
SBG-4
- Situation : Le datacentre sera opérationnel le mercredi 24 mars.
- Redémarrage électrique : Ré-énergisation ce soir 23/03.
- Redémarrage Réseau : Redémarrage réseaule 24/03.
- Redémarrage des Serveurs : ETA : dans la journée du 25 mars.

• Pages états des services SBG – Espace client
Une vue par datacentre est disponible par service dans l’espace client.

Priorité #2 : mise à disposition d’infrastructures pour nos clients affectés dans d’autres datacentres

• Nous proposons aux clients concernés une infrastructure de remplacement (Bare Metal, Hosted Private Cloud et Public Cloud) dans nos autres datacentres de Gravelines (GRA), Roubaix (RBX), Londres (LON), Varsovie (WAW) et Francfort (FRA).
• Nous nous engageons à mettre près de 15 000 nouveaux serveurs à disposition de nos clients dans les prochaines semaines.

Point sur les quantités livrées depuis le 10/03 :

Cloud Universe :
- Baremetal
+Bare Metal - servers - Quantity : 6103
+NAS-HA - TB - Quantity : 259
- Public Cloud
+VPS - VM - Quantity : 14973
- Hosted Private Cloud
+Host - servers - Quantity : 640
+Datastore
+Number of Zpool : 662
+Volume of TB : 3764

En raison de la demande actuelle, les délais de livraison sur nos services Bare Metal peuvent être plus long qu’habituellement. Nos équipes sont pleinement mobilisées et nous mettons tout en œuvre pour livrer nos clients au plus vite, en particulier les clients concernés.
En revanche les livraisons des services Public cloud, Web Cloud, VPS sont nominales sur tous les datacentres.


Priorité #3 : mise en œuvre avec nos clients de tous les mécanismes de PRA (plan de reprise d’activité)

• Nos équipes Support et nos Technical Account Managers sont en lien avec nos clients et ont mis en place un plan d’assistance.

Communication

• Une nouvelle vidéo d’Octave Klaba, fondateur d’OVHcloud, est en ligne sur son compte Twitter (https://twitter.com/olesovhcom/status/1374038409707188231).
• La plateforme communautaire OVHcloud Community(https://community.ovh.com/) est disponible pour interagir avec les membres de la communauté et vous accompagner.
• Une FAQ est toujours disponible ici => https://help.ovhcloud.com/fr/faq/incendie-strasbourg/ .
• Pour suivre l’évolution de la situation en temps réel :
o Notre principal canal de communication reste notre espace « Travaux ».
o Le compte Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) d’Octave Klaba, fondateur d’OVHcloud.
o Le compte Twitter OVHcloud : https://twitter.com/ovhcloud_fr

Notre mission reste de fournir à nos clients la plus haute qualité de service, pour soutenir leur activité en ligne. Et nous savons combien cela est important pour eux. Nous leur présentons nos sincères excuses pour les inconvénients relatifs à cette situation. Une enquête est en cours sur la cause de celle-ci. Quelle que soit son origine, OVHcloud évalue actuellement les mesures techniques et opérationnelles potentielles visant à apporter des solutions aux clients touchés.

Tous nos canaux de communication, à commencer par notre plateforme de suivi d’incidents, sont accessibles pour vous tenir informés en temps réel sur l’évolution de la situation.


Comment by OVH - Wednesday, 24 March 2021, 19:35PM


Customer information:

• In the Documentation & tutorials page (https://docs.ovh.com/gb/en/), we’ve prepared useful guides to provide assistance to customers concerned.

• SBG4 is operational.

• SBG3 is fully operational, below is the status of the services located in this datacentre:

Public Cloud :
+ Public Cloud Instance - 86%*
+ Public Cloud Storage - Restart on 27 March
Hosted Private Cloud : Services are being gradually restarted, depending on their initial configuration, on a round the clock, 24/7, rotation schedule.
+ VPS : 83%*
+ Bare Metal : 71%*

*The restoration of services is carried out according to a restart schedule room by room, aisle by aisle and rack by rack. However, server cleanup is required, and this will determine when certain racks are put back into to service. This schedule is also dependent on the safety protocol defined for on-site interventions, as the safety of our technical teams must be guaranteed.

• Real-time monitoring of the restart of SBG by room and rack is available at: http://status.ovh.com/vms/sbg/

Priority 1: restoring services to our customers

• Status summary for each datacentre

SBG-1
- Situation : Datacentre not reactivated. After inspection by teams with expertise, technical teams can access the rooms.
- Server restart : Relocation of SBG1 servers to our other datacentres: Gravelines (GRA), Roubaix (RBX), Croix (CRX) and Strasbourg (SBG4) to return to service. ETA: Wednesday 24 March.
-----
SBG-2
- Situation : Datacentre switched off and secured.
- Server restart : Replacement of infrastructure in other datacentres: Gravelines (GRA), Roubaix (RBX), London (LON), Warsaw (WAW), Frankfurt (FRA)
-----
SBG-3
- Situation : Datacentre operational since 18 March
- Electrical restart : Accomplished
- Network restart : Accomplished
- Server restart : VPS, Bare Metal, and Public Cloud services are currently being restored. Hosted Private Cloud services will be restored gradually.
-----
SBG-4
- Situation : Datacentre operational.
- Electrical restart : Accomplished
- Network restart : Accomplished
- Server restart : ETA: today, Wednesday 24 March

• SBG Service Status Pages - OVHcloud Control Panel
A view per datacentre is available per service in the Control Panel.

Priority 2: Provisioning of infrastructure for our customers in other datacentres

• For customers who have been impacted, we are offering replacement infrastructures (Bare Metal, Hosted Private Cloud and Public Cloud) in our other datacentres in Gravelines (GRA), Roubaix (RBX), London (LON), Warsaw (WAW), and Frankfurt (FRA).

• We are committed to providing nearly 15,000 new servers to our customers in the coming weeks.

Update on quantities delivered since 10th March:

Cloud Universe :
- Baremetal
+Bare Metal - servers - Quantity : 6334
+NAS-HA - TB - Quantity : 259
- Public Cloud
+VPS - VM - Quantity : 15425
- Hosted Private Cloud
+Host - servers - Quantity : 676
+Datastore
+Number of Zpool : 677
+Volume of TB : 3811

Due to the current demand, delivery times on our Bare Metal services may be longer than usual. Our teams are fully mobilised, and we are working hard to deliver to our customers as quickly as possible, especially all affected customers.
On the other hand, Public Cloud, Web Cloud and VPS services are being delivered as normal in all datacentres.

Priority 3: Implementing all DRP (Disaster Recovery Plan) mechanisms with our customers

• Our Support teams and Technical Account Managers are in contact with our customers and have a support plan in place.

Communications

• A new video from Octave Klaba, founder of OVHcloud, is available on his Twitter account(https://twitter.com/olesovhcom/status/1374069154085490690).

• The OVHcloud Community platform is now available to interact with community members and support you => https://community.ovh.com/en/

• An FAQ is available here => https://help.ovhcloud.com/en-gb/faq/strasbourg-incident/

• To follow updates about this situation in real time:
o Our main communications feed: Task Status
o Octave Klaba, founder of OVHcloud Twitter account => https://twitter.com/olesovhcom/status/1374069154085490690
o OVHcloud Twitter: https://twitter.com/ovhcloud

Our mission remains to provide our customers with the highest quality of service to support their online business and we know how important this is to them. We sincerely apologise any inconveniences related this situation. An investigation into the cause is underway. Whatever the cause of the incident, OVHcloud is currently evaluating potential technical and operational measures to bring solutions to all affected customers.

All of our communication channels, including our incident tracking platform, can be accessed so that you can stay informed of developments in real time.

------------------------------------------------------------


Informations client :

• Dans la section Documentation & tutoriels (https://docs.ovh.com/fr/), tous les tutoriels utiles pour accompagner tous les clients concernés ont été mis en avant.

• SBG4 est opérationnel.

• SBG3 est pleinement opérationnel, ci-dessous le statut des services localisés dans ce datacentre :

Public Cloud :
+ Public Cloud Instance - 86%*
+ Public Cloud Storage - Redémarrage le 27 mars
Hosted Private Cloud : Redémarrage progressif des services en cours, dépendant de la configuration initiale des services, avec un planning en rotation 7j/7.
Bare Metal Cloud :
+ VPS : 83%*
+ Bare Metal : 71%*

*Le rétablissement des services s'effectue suivant un planning de redémarrage salle par salle, allée par allée et baie par baie. Toutefois, le nettoyage des serveurs est impératif et conditionne la date de remise en service de certaines baies. Ce planning est également dépendant du protocole de sécurité défini pour les interventions sur site, la sécurité de nos équipes techniques devant être garantie.

• Le suivi en temps réel du redémarrage de SBG par salle et par baie est accessible via : http://status.ovh.com/vms/sbg/

Priorité #1 : rétablissement des services pour nos clients

• Tableau récapitulatif du statut de chaque datacentre

SBG-1
- Situation : Datacentre non remis en service. Après inspection et expertise, les équipes techniques peuvent accéder aux salles.
- Redémarrage des Serveurs : Déplacement des serveurs de SBG1 vers d’autres datacentres : Gravelines (GRA), Roubaix (RBX), Croix (CRX) et Strasbourg (SBG4) pour remise en service. ETA : à partir du mercredi 24 mars.
-----
SBG-2
- Situation : Datacentre arrêté et mis en sécurité.
- Redémarrage des Serveurs : Remplacement des infrastructures sur d’autres datacenters : Gravelines (GRA), Roubaix (RBX), Londres (LON), Varsovie (WAW), Francfort (FRA)
-----
SBG-3
- Situation : Datacentre opérationnel depuis le 18/03.
- Redémarrage électrique : Réalisé
- Redémarrage Réseau :Réalisé
- Redémarrage des Serveurs : Les services VPS, Bare Metal et Public Cloud ont commencé à être rétablis. Les services Hosted Private Cloud seront rétablis progressivement.
-----
SBG-4
- Situation : Datacentre opérationnel.
- Redémarrage électrique : Réalisé
- Redémarrage Réseau : Réalisé
- Redémarrage des Serveurs : ETA : ce jour mercredi 24 mars

• Pages états des services SBG – Espace client
Une vue par datacentre est disponible par service dans l’espace client.

Priorité #2 : mise à disposition d’infrastructures pour nos clients affectés dans d’autres datacentres

• Nous proposons aux clients concernés une infrastructure de remplacement (Bare Metal, Hosted Private Cloud et Public Cloud) dans nos autres datacentres de Gravelines (GRA), Roubaix (RBX), Londres (LON), Varsovie (WAW) et Francfort (FRA).

• Nous nous engageons à mettre près de 15 000 nouveaux serveurs à disposition de nos clients dans les prochaines semaines.

Point sur les quantités livrées depuis le 10/03 :

Cloud Universe :
- Baremetal
+Bare Metal - servers - Quantity : 6334
+NAS-HA - TB - Quantity : 259
- Public Cloud
+VPS - VM - Quantity : 15425
- Hosted Private Cloud
+Host - servers - Quantity : 676
+Datastore
+Number of Zpool : 677
+Volume of TB : 3811

En raison de la demande actuelle, les délais de livraison sur nos services Bare Metal peuvent être plus long qu’habituellement. Nos équipes sont pleinement mobilisées et nous mettons tout en œuvre pour livrer nos clients au plus vite, en particulier les clients concernés.
En revanche les livraisons des services Public cloud, Web Cloud, VPS sont nominales sur tous les datacentres.

Priorité #3 : mise en œuvre avec nos clients de tous les mécanismes de PRA (Plan de Reprise d’Activité)

• Nos équipes Support et nos Technical Account Managers sont en lien avec nos clients et ont mis en place un plan d’assistance.

Communication

• Une nouvelle vidéo d’Octave Klaba, fondateur d’OVHcloud, est en ligne sur son compte Twitter (https://twitter.com/olesovhcom/status/1374038409707188231)

• La plateforme communautaire OVHcloud Community (https://community.ovh.com/) est disponible pour interagir avec les membres de la communauté et vous accompagner.

• Une FAQ est toujours disponible ici => https://help.ovhcloud.com/fr/faq/incendie-strasbourg/

• Pour suivre l’évolution de la situation en temps réel :
o Notre principal canal de communication reste notre espace « Travaux ».
o Le compte Twitter d’Octave Klaba, fondateur d’OVHcloud => https://twitter.com/olesovhcom/status/1374038409707188231
o Le compte Twitter OVHcloud : https://twitter.com/ovhcloud_fr


Notre mission reste de fournir à nos clients la plus haute qualité de service, pour soutenir leur activité en ligne. Et nous savons combien cela est important pour eux. Nous leur présentons nos sincères excuses pour les inconvénients relatifs à cette situation. Une enquête est en cours sur la cause de celle-ci. Quelle que soit son origine, OVHcloud évalue actuellement les mesures techniques et opérationnelles potentielles visant à apporter des solutions aux clients concernés.

Tous nos canaux de communication, à commencer par notre plateforme de suivi d’incidents, sont accessibles pour vous tenir informés en temps réel sur l’évolution de la situation.


Comment by OVH - Thursday, 25 March 2021, 20:00PM

Customer information:

SBG1: Bare Metal recoverable servers are being cleaned to be put back into service in Strasbourg or other datacentres by early next week (following inspection and cleaning).
SBG3 is operational.
SBG4 is operational: 95% of Bare Metal servers are available to customers.

Below is the status of the services located in these datacentres:

SBG3
Public Cloud :
+ Public Cloud Instance - 86%*
+ Public Cloud Storage - Restart on 27 March
Hosted Private Cloud : Services are being gradually restarted, depending on their initial configuration, on a round the clock, 24/7, rotation schedule.
Veeam Cloud Connect : Services will be gradually restarted beginning this evening, 25 March.
Baremetal Cloud
+ VPS : 83%*
+ Bare Metal : 71%*

SBG4
Baremetal Cloud
+ Bare Metal : 95%*
*The restoration of services is carried out according to a restart schedule room by room, aisle by aisle and rack by rack. However, server cleanup is required, and this will determine when certain racks are put back into to service. Find out more about our cleaning process via this link (https://www.linkedin.com/posts/octave-klaba-3a0b3632_update-march24-630pm-the-cleaning-takes-activity-6780540963271000064-8Q7i).

This schedule is also subject to Covid-19 and safety protocols, defined for on-site interventions, to maintain the health and ensure the safety of our technical teams.

• In the documentation & tutorials section, all tutorials useful for assisting all affected customers have been highlighted.
• Real-time monitoring of SBG restart by room and rack is available via: http://status.ovh.com/vms/sbg/

Priority 1: Restoring services to our customers

• Status summary for each datacentre

SBG-1
- Situation : Datacentre not reactivated. After inspection by teams with expertise, technical teams can access the rooms.
- Server restart : Moving recoverable servers after inspection and cleaning, to our other datacentres: Gravelines (GRA), Roubaix (RBX), Croix (CRX) and Strasbourg (SBG4) to return to service.
The aim is to restore services from the beginning of the week of 29 March.
-----
SBG-2
- Situation : Datacentre switched off and secured.
- Server restart : Replacement of infrastructure in other datacentres: Gravelines (GRA), Roubaix (RBX), London (LON), Warsaw (WAW), Frankfurt (FRA)
-----
SBG-3
- Situation : Datacentre operational since 18 March
- Electrical restart : Accomplished
- Network restart : Accomplished
- Server restart : VPS, Bare Metal, and Public Cloud services are currently being restored. Hosted Private Cloud services will be restored gradually.
-----
SBG-4
- Situation : Datacentre operational.
- Electrical restart : Accomplished
- Network restart : Accomplished
- Server restart : 95% of Bare Metal customer servers are accessible.

• SBG Service Status Pages - OVHcloud Control Panel

A view per datacentre is available per service in the Control Panel.

Priority 2: Provisioning of infrastructure for our customers in other datacentres


• For customers who have been impacted, we are offering replacement infrastructures (Bare Metal, Hosted Private Cloud and Public Cloud) in our other datacentres in Gravelines (GRA), Roubaix (RBX), London (LON), Warsaw (WAW), and Frankfurt (FRA).
• We are committed to providing nearly 15,000 new servers to our customers in the coming weeks.

Update on quantities delivered since 10th March:

Cloud Universe :
- Baremetal
+Bare Metal - servers - Quantity : 6812
+NAS-HA - TB - Quantity : 259
- Public Cloud
+VPS - VM - Quantity : 15732
- Hosted Private Cloud
+Host - servers - Quantity : 723
+Datastore
+Number of Zpool : 706
+Volume of TB : 4079

Due to the current demand, delivery times on our Bare Metal services may be longer than usual. Our teams are fully mobilised, and we are working hard to deliver to our customers as quickly as possible, especially all affected customers.

On the other hand, Public Cloud, Web Cloud and VPS services are being delivered as normal in all datacentres.

Priority 3: Implementing all DRP (Disaster Recovery Plan) mechanisms with our customers

• Our Support teams and Technical Account Managers are in contact with our customers and have a support plan in place.

Communications

• The OVHcloud Community platform is now available to interact with community members and support you.
•An FAQ is available here => https://help.ovhcloud.com/en-gb/faq/strasbourg-incident/
•To follow updates about this situation in real time:


Our main communications feed: Task Status
Octave Klaba, founder of OVHcloud Twitter account (https://twitter.com/olesovhcom/status/1374038409707188231)
OVHcloud Twitter: https://twitter.com/ovhcloud_fr

Our mission remains to provide our customers with the highest quality of service to support their online business and we know how important this is to them. We sincerely apologise any inconveniences related this situation. An investigation into the cause is underway. Whatever the cause of the incident, OVHcloud is currently evaluating potential technical and operational measures to bring solutions to all affected customers.

All of our communication channels, including our incident tracking platform, can be accessed so that you can stay informed of developments in real time.

------------------------------------------------------------------------------------------


Informations client :


• SBG1 : les serveurs récupérables Bare Metal sont en cours de nettoyage pour être remis en service sur Strasbourg ou d’autres datacentres pour le début de la semaine prochaine (après inspection et nettoyage réalisés).
• SBG3 est opérationnel.
• SBG4 est opérationnel : 95% des serveurs BM sont à disposition des clients.

Ci-dessous le statut des services localisés dans ces datacentres :

SBG3
Public Cloud :
+ Public Cloud Instance - 86%*
+ Public Cloud Storage - Redémarrage le 27 mars
Hosted Private Cloud : Redémarrage progressif des services en cours, dépendant de la configuration initiale des services, avec un planning en rotation 7j/7.
Veeam Cloud Connect : Redémarrage progressif des services à partir de ce soir 25 mars.
Bare Metal Cloud :
+ VPS : 83%*
+ Bare Metal : 71%*

SBG4
Bare Metal Cloud :
+ Bare Metal : 95%*

* Le rétablissement des services s'effectue suivant un planning de redémarrage salle par salle, allée par allée et baie par baie. Toutefois, le nettoyage des serveurs est impératif et conditionne la date de remise en service de certaines baies. Retrouvez des informations complémentaires sur notre processus de nettoyage via ce lien => https://www.linkedin.com/posts/octave-klaba-3a0b3632_update-march24-630pm-the-cleaning-takes-activity-6780540963271000064-8Q7i.

Ce planning est également dépendant des protocoles de sécurité et de Covid-19, définis pour les interventions sur site, ayant pour objectifs de préserver la santé et assurer la sécurité de nos équipes techniques.

•Dans la section documentation & tutoriels (https://docs.ovh.com/fr/), tous les tutoriels utiles pour accompagner tous les clients concernés ont été mis en avant.

•Le suivi en temps réel du redémarrage de SBG par salle et par baie est accessible via : http://status.ovh.com/vms/sbg/

Priorité #1 : rétablissement des services pour nos clients

•Tableau récapitulatif du statut de chaque datacentre

SBG-1
- Situation : Datacentre non remis en service. Après inspection et expertise, les équipes techniques peuvent accéder aux salles.
- Redémarrage des Serveurs : Déplacement des serveurs récupérables après inspection et nettoyage, vers d’autres datacentres : Gravelines (GRA), Roubaix (RBX), Croix (CRX) et Strasbourg (SBG4) pour remise en service.
Objectif rétablissement des services à compter du début de la semaine du 29 Mars.
-----
SBG-2
- Situation : Datacentre arrêté et mis en sécurité.
- Redémarrage des Serveurs : Remplacement des infrastructures sur d’autres datacenters : Gravelines (GRA), Roubaix (RBX), Londres (LON), Varsovie (WAW), Francfort (FRA)
-----
SBG-3
- Situation : Datacentre opérationnel depuis le 18/03.
- Redémarrage électrique : Réalisé
- Redémarrage Réseau :Réalisé
- Redémarrage des Serveurs : Les services VPS, Bare Metal et Public Cloud ont commencé à être rétablis. Les services Hosted Private Cloud seront rétablis progressivement.
-----
SBG-4
- Situation : Datacentre opérationnel.
- Redémarrage électrique : Réalisé
- Redémarrage Réseau : Réalisé
- Redémarrage des Serveurs : 95% des serveurs Bare Metal clients sont accessibles.

•Pages états des services SBG – Espace client

Une vue par datacentre est disponible par service dans l’espace client.

Priorité #2 : mise à disposition d’infrastructures pour nos clients affectés dans d’autres datacentres

•Nous proposons aux clients concernés une infrastructure de remplacement (Bare Metal, Hosted Private Cloud et Public Cloud) dans nos autres datacentres de Gravelines (GRA), Roubaix (RBX), Londres (LON), Varsovie (WAW) et Francfort (FRA).
•Nous nous engageons à mettre près de 15 000 nouveaux serveurs à disposition de nos clients dans les prochaines semaines.

Point sur les quantités livrées depuis le 10/03 :

Cloud Universe :
- Baremetal
+Bare Metal - servers - Quantity : 6812
+NAS-HA - TB - Quantity : 259
- Public Cloud
+VPS - VM - Quantity : 15732
- Hosted Private Cloud
+Host - servers - Quantity : 723
+Datastore
+Number of Zpool : 706
+Volume of TB : 4079

En raison de la demande actuelle, les délais de livraison sur nos services Bare Metal peuvent être plus long qu’habituellement. Nos équipes sont pleinement mobilisées et nous mettons tout en œuvre pour livrer nos clients au plus vite, en particulier les clients concernés.

En revanche les livraisons des services Public cloud, Web Cloud, VPS sont nominales sur tous les datacentres.

Priorité #3 : mise en œuvre avec nos clients de tous les mécanismes de PRA (Plan de Reprise d’Activité)

• Nos équipes Support et nos Technical Account Managers sont en lien avec nos clients et ont mis en place un plan d’assistance.

Communication

•La plateforme communautaire OVHcloud Community (https://community.ovh.com/) est disponible pour interagir avec les membres de la communauté et vous accompagner.
•Une FAQ est toujours disponible ici (https://help.ovhcloud.com/fr/faq/incendie-strasbourg/).
•Pour suivre l’évolution de la situation en temps réel :


Notre principal canal de communication reste notre espace « Travaux ».
Le compte Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) d’Octave Klaba, fondateur d’OVHcloud.
Le compte Twitter OVHcloud : https://twitter.com/ovhcloud_fr

Notre mission reste de fournir à nos clients la plus haute qualité de service, pour soutenir leur activité en ligne. Et nous savons combien cela est important pour eux. Nous leur présentons nos sincères excuses pour les inconvénients relatifs à cette situation. Une enquête est en cours sur la cause de celle-ci. Quelle que soit son origine, OVHcloud évalue actuellement les mesures techniques et opérationnelles potentielles visant à apporter des solutions aux clients concernés.

Tous nos canaux de communication, à commencer par notre plateforme de suivi d’incidents, sont accessibles pour vous tenir informés en temps réel sur l’évolution de la situation.


Comment by OVH - Friday, 26 March 2021, 17:50PM

Customer information:

• SBG1: The recoverable Bare Metal Cloud servers are being cleaned for relocation to Strasbourg or other datacentres. Re-commissioning will be gradually started by the beginning of next week (after inspection and cleaning).
• SBG3 is operational.
• SBG4 is operational: 100% of Bare Metal servers are available to customers.

Below is the status of the services located in these datacentres:

SBG3
Public Cloud :
+ Public Cloud Instance - 89%*
+ Public Cloud Storage - There will be a gradual restart for all services from 27 March**.
Hosted Private Cloud : Services are being gradually restarted, depending on their initial configuration, on a round the clock, 24/7, rotation schedule.
Veeam Cloud Connect : Services will be gradually restarted from 25 March.
Baremetal Cloud
+ VPS : 83%*
+ Bare Metal : 75%*

SBG4
Baremetal Cloud
+ Bare Metal : 100%*

*The restoration of services is carried out according to a restart schedule room by room, aisle by aisle and rack by rack. However, server cleanup is required, and this will determine when certain racks are put back into to service. Find out more about our cleaning process via this link (https://www.linkedin.com/posts/octave-klaba-3a0b3632_update-march26-7am-sbg4-all-servers-in-activity-6781098337518043136-GSYg).
Today, the cleaning time for a rack is 7 hours, and our teams are improving this every day.
This schedule is also subject to Covid-19 and security protocols, defined for on-site interventions, with the goal of maintaining the health and ensuring the safety of our technical teams.

• In the documentation & tutorials (https://docs.ovh.com/gb/en/) section, all tutorials useful for assisting all affected customers have been highlighted.
• Real-time monitoring of the restart of SBG by room and rack is available at: http://status.ovh.com/vms/sbg/

Priority 1: Restoring services to our customers

• Status summary for each datacentre

SBG-1
- Situation : Datacentre not reactivated. After inspection by teams with expertise, technical teams can access the rooms.
- Server restart : Moving recoverable servers after inspection and cleaning, to our other datacentres: Gravelines (GRA), Roubaix (RBX), Croix (CRX) and Strasbourg (SBG4) to return to service.
Restart of the servers after cleaning by mid week of 29 March.

-----
SBG-2
- Situation : Datacentre switched off and secured.
- Server restart : Replacement of infrastructure in other datacentres: Gravelines (GRA), Roubaix (RBX), London (LON), Warsaw (WAW), Frankfurt (FRA)
-----
SBG-3
- Situation : Datacentre operational since 18 March
- Electrical restart : Accomplished
- Network restart : Accomplished
- Server restart : VPS, Public Cloud, Bare Metal Cloud, Hosted Private Cloud, Veeam Cloud Connect and Veeam Managed Backup services have started to be restored.
-----
SBG-4
- Situation : Datacentre operational.
- Electrical restart : Accomplished
- Network restart : Accomplished
- Server restart : 100% of Bare Metal customer servers are accessible.

• SBG Service Status Pages - OVHcloud Control Panel
A view per datacentre is available per service in the Control Panel.

For Public Cloud customers based in Strasbourg (SBG) who have not yet recovered their services located in racks that are being cleaned, a notification has been added to their Control Panel:


Priority 2: Provisioning of infrastructure for our customers in other datacentres

• For customers who have been impacted, we are offering replacement infrastructures (Bare Metal, Hosted Private Cloud and Public Cloud) in our other datacentres in Gravelines (GRA), Roubaix (RBX), London (LON), Warsaw (WAW), and Frankfurt (FRA).

• We are committed to providing nearly 15,000 new servers to our customers in the coming weeks.

Update on quantities delivered since 10th March:


Cloud Universe :
- Baremetal
+Bare Metal - servers - Quantity : 6987
+NAS-HA - TB - Quantity : 259
- Public Cloud
+VPS - VM - Quantity : 16087
- Hosted Private Cloud
+Host - servers - Quantity : 840
+Datastore
+Number of Zpool : 764
+Volume of TB : 4158

Due to the current demand, delivery times on our Bare Metal services may be longer than usual. Our teams are fully mobilised, and we are working hard to deliver to our customers as quickly as possible, especially all affected customers.
On the other hand, Public Cloud, Web Cloud and VPS services are being delivered as normal in all datacentres.

Priority 3: Implementing all DRP (Disaster Recovery Plan) mechanisms with our customers

• Our Support teams and Technical Account Managers are in contact with our customers and have a support plan in place.

Communications

• The latest video from Octave Klaba, founder of OVHcloud, is available on his Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) account.
• The OVHcloud Community platform is now available to interact with community members and support you.
• An FAQ is available here(https://help.ovhcloud.com/en-gb/faq/strasbourg-incident/).
• To follow updates about this situation in real time:
o Our main communications feed: Task Status
o Octave Klaba, founder of OVHcloud Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) account.
o OVHcloud Twitter: https://twitter.com/ovhcloud

Our mission remains to provide our customers with the highest quality of service to support their online business and we know how important this is to them. We sincerely apologise any inconveniences related this situation. An investigation into the cause is underway. Whatever the cause of the incident, OVHcloud is currently evaluating potential technical and operational measures to bring solutions to all affected customers.

All of our communication channels, including our incident tracking platform, can be accessed so that you can stay informed of developments in real time.

----------------------------------------------

Informations client :

• SBG1 : les serveurs récupérables Bare Metal Cloud sont en cours de nettoyage pour être remontés sur Strasbourg ou d’autres datacentres. La remise en service se fera progressivement pour le début de la semaine prochaine (après inspection et nettoyage réalisés).

• SBG3 est opérationnel.

• SBG4 est opérationnel : 100% des serveurs Bare Metal Cloud sont à disposition des clients.

Ci-dessous le statut des services localisés dans ces datacentres :

SBG3
Public Cloud :
+ Public Cloud Instance - 89%*
+ Public Cloud Storage - Redémarrage le 27 mars**
Hosted Private Cloud : Redémarrage progressif des services en cours, dépendant de la configuration initiale des services, avec un planning en rotation 7j/7.
Veeam Cloud Connect : Redémarrage progressif des services depuis le 25 mars.
Bare Metal Cloud :
+ VPS : 83%*
+ Bare Metal : 75%*

SBG4
Bare Metal Cloud :
+ Bare Metal : 100%*

* Le rétablissement des services s'effectue suivant un planning de redémarrage salle par salle, allée par allée et baie par baie. Toutefois, le nettoyage des serveurs est impératif et conditionne la date de remise en service de certaines baies. Retrouvez des informations complémentaires sur notre processus de nettoyage via ce lien (https://www.linkedin.com/posts/octave-klaba-3a0b3632_update-march26-7am-sbg4-all-servers-in-activity-6781098337518043136-GSYg).
Le temps de nettoyage d’une baie est aujourd’hui de 7 heures et nos équipes améliorent cette cadence de jour en jour.
Ce planning est également dépendant des protocoles de sécurité et de Covid-19, définis pour les interventions sur site, ayant pour objectifs de préserver la santé et assurer la sécurité de nos équipes techniques.

**Le backups étant hébergés sur des services Public Cloud Storage, le redémarrage des services PCS occasionnera la mise à disposition de nombreux backups.

• Dans la section documentation & tutoriels(https://docs.ovh.com/fr/), tous les tutoriels utiles pour accompagner tous les clients concernés ont été mis en avant.

• Le suivi en temps réel du redémarrage de SBG par salle et par baie est accessible via : http://status.ovh.com/vms/sbg/

Priorité #1 : rétablissement des services pour nos clients

• Tableau récapitulatif du statut de chaque datacentre

SBG-1
- Situation : Datacentre non remis en service. Après inspection et expertise, les équipes techniques peuvent accéder aux salles.
- Redémarrage des Serveurs : Déplacement des serveurs récupérables après inspection et nettoyage, vers d’autres datacentres : Gravelines (GRA), Roubaix (RBX), Croix (CRX) et Strasbourg (SBG4) pour remise en service.
Objectif rétablissement des services à compter du début de la semaine du 29 Mars.
-----
SBG-2
- Situation : Datacentre arrêté et mis en sécurité.
- Redémarrage des Serveurs : Remplacement des infrastructures sur d’autres datacenters : Gravelines (GRA), Roubaix (RBX), Londres (LON), Varsovie (WAW), Francfort (FRA)
-----
SBG-3
- Situation : Datacentre opérationnel depuis le 18/03.
- Redémarrage électrique : Réalisé
- Redémarrage Réseau :Réalisé
- Redémarrage des Serveurs : Les services VPS, Public Cloud, Bare Metal Cloud, Hosted Private Cloud, Veeam Cloud Connect et Veeam Managed Backup ont commencé à être rétablis.
-----
SBG-4
- Situation : Datacentre opérationnel.
- Redémarrage électrique : Réalisé
- Redémarrage Réseau : Réalisé
- Redémarrage des Serveurs : 100% des serveurs Bare Metal Cloud clients sont accessibles.

• Pages états des services SBG – Espace client
Une vue par datacentre est disponible par service dans l’espace client.

Pour les clients Public Cloud du site de Strasbourg (SBG) qui n’auraient pas encore recouvré leur(s) service(s) localisés dans des baies en cours de nettoyage, une notification a été rajoutée dans leur espace client :

Priorité #2 : mise à disposition d’infrastructures pour nos clients affectés dans d’autres datacentres

• Nous proposons aux clients concernés une infrastructure de remplacement (Bare Metal Cloud, Hosted Private Cloud et Public Cloud) dans nos autres datacentres de Gravelines (GRA), Roubaix (RBX), Londres (LON), Varsovie (WAW) et Francfort (FRA).

• Nous nous engageons à mettre près de 15 000 nouveaux serveurs à disposition de nos clients dans les prochaines semaines.

Point sur les quantités livrées depuis le 10/03 :

Cloud Universe :
- Baremetal
+Bare Metal - servers - Quantity : 6987
+NAS-HA - TB - Quantity : 259
- Public Cloud
+VPS - VM - Quantity : 16087
- Hosted Private Cloud
+Host - servers - Quantity : 840
+Datastore
+Number of Zpool : 764
+Volume of TB : 4158

En raison de la demande actuelle, les délais de livraison sur nos services Bare Metal Cloud peuvent être plus long qu’habituellement. Nos équipes sont pleinement mobilisées et nous mettons tout en œuvre pour livrer nos clients au plus vite, en particulier les clients concernés.
En revanche les livraisons des services Public cloud, Web Cloud, VPS sont nominales sur tous les datacentres.

Priorité #3 : mise en œuvre avec nos clients de tous les mécanismes de PRA (Plan de Reprise d’Activité)

• Nos équipes Support et nos Technical Account Managers sont en lien avec nos clients et ont mis en place un plan d’assistance.

Communication

• La dernière vidéo d’Octave Klaba, fondateur d’OVHcloud est accessible en ligne sur son compte Twitter (https://twitter.com/olesovhcom/status/1374038409707188231).

• La plateforme communautaire OVHcloud Community (https://community.ovh.com/) est disponible pour interagir avec les membres de la communauté et vous accompagner.

• Une FAQ est toujours disponible ici (https://help.ovhcloud.com/fr/faq/incendie-strasbourg/).

• Pour suivre l’évolution de la situation en temps réel :
o Notre principal canal de communication reste notre espace « Travaux ».
o Le compte Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) d’Octave Klaba, fondateur d’OVHcloud.
o Le compte Twitter OVHcloud : https://twitter.com/ovhcloud_fr

Notre mission reste de fournir à nos clients la plus haute qualité de service, pour soutenir leur activité en ligne. Et nous savons combien cela est important pour eux. Nous leur présentons nos sincères excuses pour les inconvénients relatifs à cette situation. Une enquête est en cours sur la cause de celle-ci. Quelle que soit son origine, OVHcloud évalue actuellement les mesures techniques et opérationnelles potentielles visant à apporter des solutions aux clients concernés.

Tous nos canaux de communication, à commencer par notre plateforme de suivi d’incidents, sont accessibles pour vous tenir informés en temps réel sur l’évolution de la situation.



Comment by OVH - Saturday, 27 March 2021, 19:49PM


Customer information:

• SBG1: The recoverable Bare Metal Cloud servers are being cleaned for relocation to Strasbourg or other datacentres. Re-commissioning will be gradually started by the beginning of next week (after inspection and cleaning).
• SBG3 is operational: 83% of Bare Metal Cloud services have been made available to customers again, with a target of 90% by the evening of 28 March.
• SBG4 is operational: 100% of Bare Metal servers are available to customers.

Below is the status of the services located in these datacentres:


SBG3
Public Cloud :
+ Public Cloud Instance - 89%*
+ Public Cloud Storage - Services will be gradually restarted from 27 March**
Services not yet returned to customers will be available again on Monday 29/03 and Tuesday 30/03.

Hosted Private Cloud : Services are being gradually restarted, depending on their initial configuration, on a round the clock, 24/7, rotation schedule.
Veeam Cloud Connect : Services will be gradually restarted from 25 March.
Baremetal Cloud
+ VPS : 83%* (90% by 28/03).
+ Bare Metal : 75%* (85% by 28/03).

SBG4
Baremetal Cloud
+ Bare Metal : 100%*

*The restoration of services is carried out according to a restart schedule room by room, aisle by aisle and rack by rack. However, server cleanup is required, and this will determine when certain racks are put back into to service. Find out more about our cleaning process via this link (https://www.linkedin.com/posts/octave-klaba-3a0b3632_update-march26-7am-sbg4-all-servers-in-activity-6781098337518043136-GSYg).
Today, the cleaning time for a rack is 7 hours, and our teams are improving this every day.
This schedule is also subject to Covid-19 and security protocols, defined for on-site interventions, with the goal of maintaining the health and ensuring the safety of our technical teams.

**As backups are hosted on Public Cloud Storage services, restarting the PCS services will result in many backups being made available.

• In the documentation & tutorials (https://docs.ovh.com/gb/en/) section, all tutorials useful for assisting all affected customers have been highlighted.
• Real-time monitoring of the restart of SBG by room and rack is available at: http://status.ovh.com/vms/sbg/

Priority 1: Restoring services to our customers

• Status summary for each datacentre

SBG-1
- Situation : Datacentre not reactivated. After inspection by teams with expertise, technical teams can access the rooms.
- Server restart : Moving recoverable servers after inspection and cleaning, to our other datacentres: Gravelines (GRA), Roubaix (RBX), Croix (CRX) and Strasbourg (SBG4) to return to service.
After cleaning, the servers will be restarted by mid-week of 29 March.(1)

-----
SBG-2
- Situation : Datacentre switched off and secured.
- Server restart : Replacement of infrastructure in other datacentres: Gravelines (GRA), Roubaix (RBX), London (LON), Warsaw (WAW), Frankfurt (FRA)
-----
SBG-3
- Situation : Datacentre operational since 18 March
- Electrical restart / Network : Accomplished
- Server restart : VPS, Public Cloud, Bare Metal Cloud, Hosted Private Cloud, Veeam Cloud Connect and Veeam Managed Backup services are in the process of being restored.(2)
-----
SBG-4
- Situation : Datacentre operational.
- Electrical restart : Accomplished
- Network restart : Accomplished
- Server restart : 100% of Bare Metal customer servers are accessible.


(1) / (2) Additional information on the progress of operations:

• SBG1: rooms A to D:
o Servers to be transferred to racks in SBG4 with a scheduled return to service from Wednesday 30/03.
• SBG1: rooms 61E and 62E:
o Teams are working in rotation to clean all servers located in these rooms throughout the weekend, and will be finished by Tuesday 30/03 in Croix.
o The cleaned and tested servers will then be returned to the different datacentres (RBX, GRA, SBG4) and set up in their new racks.
o The services are scheduled to be gradually restarted between Thursday 01/04 and Friday 02/04.

• SBG3: the cleaning work on all Bare Metal servers will probably be completed by Wednesday 31/03.

• SBG Service Status Pages - OVHcloud Control Panel
A view per datacentre is available per service in the Control Panel.

For Public Cloud customers based in Strasbourg (SBG) who have not yet recovered their services located in racks that are being cleaned, a notification has been added to their Control Panel:

Priority 2: Provisioning of infrastructure for our customers in other datacentres

• For customers who have been impacted, we are offering replacement infrastructures (Bare Metal, Hosted Private Cloud and Public Cloud) in our other datacentres in Gravelines (GRA), Roubaix (RBX), London (LON), Warsaw (WAW), and Frankfurt (FRA).
• We are committed to providing nearly 15,000 new servers to our customers in the coming weeks.

Update on quantities delivered since 10th March:

Cloud Universe :
- Baremetal
+Bare Metal - servers - Quantity : 7217
+NAS-HA - TB - Quantity : 259
- Public Cloud
+VPS - VM - Quantity : 16337
- Hosted Private Cloud
+Host - servers - Quantity : 870
+Datastore
+Number of Zpool : 796
+Volume of TB : 4532

Due to the current demand, delivery times on our Bare Metal services may be longer than usual. Our teams are fully mobilised, and we are working hard to deliver to our customers as quickly as possible, especially all affected customers.
On the other hand, Public Cloud, Web Cloud and VPS services are being delivered as normal in all datacentres.

Priority 3: Implementing all DRP (Disaster Recovery Plan) mechanisms with our customers

• Our Support teams and Technical Account Managers are in contact with our customers and have a support plan in place.

Communications
• The latest video from Octave Klaba, founder of OVHcloud, is available on his Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) account.
• The OVHcloud Community platform is now available to interact with community members and support you.
• An FAQ is available here(https://help.ovhcloud.com/en-gb/faq/strasbourg-incident/).
• To follow updates about this situation in real time:
o Our main communications feed: Task Status
o Octave Klaba, founder of OVHcloud Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) account.
o OVHcloud Twitter: https://twitter.com/ovhcloud

Our mission remains to provide our customers with the highest quality of service to support their online business and we know how important this is to them. We sincerely apologise any inconveniences related this situation. An investigation into the cause is underway. Whatever the cause of the incident, OVHcloud is currently evaluating potential technical and operational measures to bring solutions to all affected customers.

All of our communication channels, including our incident tracking platform, can be accessed so that you can stay informed of developments in real time.

-----------------------------------------------

Informations client :

• SBG1 : les serveurs récupérables Bare Metal Cloud sont en cours de nettoyage pour être remontés sur Strasbourg ou d’autres datacentres. La remise en service se fera progressivement pour le début de la semaine prochaine (après inspection et nettoyage réalisés).
• SBG3 est opérationnel : 83% des services Bare Metal Cloud ont été remis à disposition des clients avec un objectif de 90% le 28 mars au soir.
• SBG4 est opérationnel : 100% des serveurs Bare Metal Cloud sont à disposition des clients.

Ci-dessous le statut des services localisés dans ces datacentres :

SBG3
Public Cloud :
+ Public Cloud Instance - 89%*
+ Public Cloud Storage - Redémarrage progressif des services depuis le 27 mars**
Les services non restitués aux clients le seront lundi 29.03 et mardi 30.03.

Hosted Private Cloud : Redémarrage progressif des services en cours, dépendant de la configuration initiale des services, avec un planning en rotation 7j/7.
Veeam Cloud Connect : Redémarrage progressif des services depuis le 25 mars.
Bare Metal Cloud :
+ VPS : 83%*et 90% pour le 28/03.
+ Bare Metal : 75%* et 85% pour le 28/03.
SBG4
Bare Metal Cloud :
+ Bare Metal : 100%*

* Le rétablissement des services s'effectue suivant un planning de redémarrage salle par salle, allée par allée et baie par baie. Toutefois, le nettoyage des serveurs est impératif et conditionne la date de remise en service de certaines baies. Retrouvez des informations complémentaires sur notre processus de nettoyage via ce lien (https://www.linkedin.com/posts/octave-klaba-3a0b3632_update-march26-7am-sbg4-all-servers-in-activity-6781098337518043136-GSYg).
Le temps de nettoyage d’une baie est aujourd’hui de 7 heures et nos équipes améliorent cette cadence de jour en jour.
Ce planning est également dépendant des protocoles de sécurité et de Covid-19, définis pour les interventions sur site, ayant pour objectifs de préserver la santé et assurer la sécurité de nos équipes techniques.

**Le backups étant hébergés sur des services Public Cloud Storage, le redémarrage des services PCS occasionnera la mise à disposition de nombreux backups.

• Dans la section documentation & tutoriels(https://docs.ovh.com/fr/), tous les tutoriels utiles pour accompagner tous les clients concernés ont été mis en avant.
• Le suivi en temps réel du redémarrage de SBG par salle et par baie est accessible via : http://status.ovh.com/vms/sbg/

Priorité #1 : rétablissement des services pour nos clients

• Tableau récapitulatif du statut de chaque datacentre

SBG-1
- Situation : Datacentre non remis en service. Après inspection et expertise, les équipes techniques peuvent accéder aux salles.
- Redémarrage des Serveurs : Déplacement des serveurs récupérables après inspection et nettoyage, vers d’autres datacentres : Gravelines (GRA), Roubaix (RBX), Croix (CRX) et Strasbourg (SBG4) pour remise en service.
Remise en service des serveurs après nettoyage dans le milieu de la semaine du 29 mars (1).

-----
SBG-2
- Situation : Datacentre arrêté et mis en sécurité.
- Redémarrage des Serveurs : Remplacement des infrastructures sur d’autres datacenters : Gravelines (GRA), Roubaix (RBX), Londres (LON), Varsovie (WAW), Francfort (FRA)
-----
SBG-3
- Situation : Datacentre opérationnel depuis le 18/03.
- Redémarrage électrique / Réseau: Réalisé
- Redémarrage des Serveurs : Les services VPS, Public Cloud, Bare Metal Cloud, Hosted Private Cloud, Veeam Cloud Connect et Veeam Managed Backup ont commencé à être rétablis (2).
-----
SBG-4
- Situation : Datacentre opérationnel.
- Redémarrage électrique / Réseau : Réalisé
- Redémarrage des Serveurs : 100% des serveurs Bare Metal Cloud clients sont accessibles.

Informations complémentaires sur le déroulement des opérations (1) et (2) :

• SBG1 : salles A à D :
o Transfert des serveurs dans des baies à SBG4 et remise en service planifiée partir de mercredi 30/03.
• SBG1 : salle 61E et 62E :
o Le nettoyage de tous les serveurs localisés dans ces salles continue tout le week-end avec des équipes en rotation et sera terminé pour le mardi 30/03 à Croix.
o Les serveurs nettoyés et testés sont ensuite renvoyés dans les différents datacentres (RBX, GRA, SBG4) et reconnectés dans de nouvelles baies.
o Le redémarrage progressif des services est planifié entre le jeudi 01/04 et le vendredi 02/04.

• SBG3 : le nettoyage de de tous les serveurs Bare Metal sera finalisé probablement pour mercredi 31 mars

• Pages états des services SBG – Espace client
Une vue par datacentre est disponible par service dans l’espace client.

Pour les clients Public Cloud du site de Strasbourg (SBG) qui n’auraient pas encore recouvré leur(s) service(s) localisés dans des baies en cours de nettoyage, une notification a été rajoutée dans leur espace client :


Priorité #2 : mise à disposition d’infrastructures pour nos clients affectés dans d’autres datacentres

• Nous proposons aux clients concernés une infrastructure de remplacement (Bare Metal Cloud, Hosted Private Cloud et Public Cloud) dans nos autres datacentres de Gravelines (GRA), Roubaix (RBX), Londres (LON), Varsovie (WAW) et Francfort (FRA).
• Nous nous engageons à mettre près de 15 000 nouveaux serveurs à disposition de nos clients dans les prochaines semaines.

Point sur les quantités livrées depuis le 10/03 :

Cloud Universe :
- Baremetal
+Bare Metal - servers - Quantity : 7217
+NAS-HA - TB - Quantity : 259
- Public Cloud
+VPS - VM - Quantity : 16337
- Hosted Private Cloud
+Host - servers - Quantity : 870
+Datastore
+Number of Zpool : 796
+Volume of TB : 4532

En raison de la demande actuelle, les délais de livraison sur nos services Bare Metal Cloud peuvent être plus long qu’habituellement. Nos équipes sont pleinement mobilisées et nous mettons tout en œuvre pour livrer nos clients au plus vite, en particulier les clients concernés.
En revanche les livraisons des services Public cloud, Web Cloud, VPS sont nominales sur tous les datacentres.

Priorité #3 : mise en œuvre avec nos clients de tous les mécanismes de PRA (Plan de Reprise d’Activité)

• Nos équipes Support et nos Technical Account Managers sont en lien avec nos clients et ont mis en place un plan d’assistance.

Communication

• La dernière vidéo d’Octave Klaba, fondateur d’OVHcloud est accessible en ligne sur son compte Twitter (https://twitter.com/olesovhcom/status/1374038409707188231).

• La plateforme communautaire OVHcloud Community (https://community.ovh.com/) est disponible pour interagir avec les membres de la communauté et vous accompagner.

• Une FAQ est toujours disponible ici (https://help.ovhcloud.com/fr/faq/incendie-strasbourg/).

• Pour suivre l’évolution de la situation en temps réel :
o Notre principal canal de communication reste notre espace « Travaux ».
o Le compte Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) d’Octave Klaba, fondateur d’OVHcloud.
o Le compte Twitter OVHcloud : https://twitter.com/ovhcloud_fr

Notre mission reste de fournir à nos clients la plus haute qualité de service, pour soutenir leur activité en ligne. Et nous savons combien cela est important pour eux. Nous leur présentons nos sincères excuses pour les inconvénients relatifs à cette situation. Une enquête est en cours sur la cause de celle-ci. Quelle que soit son origine, OVHcloud évalue actuellement les mesures techniques et opérationnelles potentielles visant à apporter des solutions aux clients concernés.

Tous nos canaux de communication, à commencer par notre plateforme de suivi d’incidents, sont accessibles pour vous tenir informés en temps réel sur l’évolution de la situation.


Comment by OVH - Sunday, 28 March 2021, 19:52PM

Customer information:

• SBG1: The recoverable Bare Metal Cloud servers are being cleaned for reinstallation in Strasbourg (SBG3 and SBG4). Re-commissioning will be gradually started by the beginning of next week (after inspection and cleaning).
• SBG3 is operational: 84% of Bare Metal Cloud (VPS) services have been made available to customers again, with a target of 90% by the evening of 28 March.
• SBG4 is operational: 100% of Bare Metal servers are available to customers.

Below is the status of the services located in these datacentres:

SBG3
Public Cloud :
+ Public Cloud Instance - 90%*
+ Public Cloud Storage - Services will be gradually restarted from 27 March**
Services not yet returned to customers will be available again on Monday 29/03 and Tuesday 30/03.

Hosted Private Cloud : Services are being gradually restarted, depending on their initial configuration, on a round the clock, 24/7, rotation schedule.
Veeam Cloud Connect : Services will be gradually restarted from 25 March.
Baremetal Cloud
+ VPS : 84%* (90% by 28/03).
+ Bare Metal : 80%* (85% by 28/03).

SBG4
Baremetal Cloud
+ Bare Metal : 100%*


*The restoration of services is carried out according to a restart schedule room by room, aisle by aisle and rack by rack. However, server cleanup is required, and this will determine when certain racks are put back into to service. Find out more about our cleaning process via this link (https://www.linkedin.com/posts/octave-klaba-3a0b3632_update-march26-7am-sbg4-all-servers-in-activity-6781098337518043136-GSYg).
Today, the cleaning time for a rack is 7 hours, and our teams are improving this every day.
This schedule is also subject to Covid-19 and security protocols, defined for on-site interventions, with the goal of maintaining the health and ensuring the safety of our technical teams.

**As backups are hosted on Public Cloud Storage services, restarting the PCS services will result in many backups being made available.

• In the documentation & tutorials (https://docs.ovh.com/gb/en/) section, all tutorials useful for assisting all affected customers have been highlighted.
• Real-time monitoring of the restart of SBG by room and rack is available at: http://status.ovh.com/vms/sbg/

Priority 1: Restoring services to our customers

• Status summary for each datacentre

SBG-1
- Situation : Datacentre not reactivated. After inspection by teams with expertise, technical teams can access the rooms.
- Server restart : Moving recoverable servers after inspection and cleaning, to our other datacentres: Gravelines (GRA), Roubaix (RBX), Croix (CRX) and Strasbourg (SBG4) to return to service.
After cleaning, the servers will be restarted by mid-week of 29 March.(1)

-----
SBG-2
- Situation : Datacentre switched off and secured.
- Server restart : Replacement of infrastructure in other datacentres: Gravelines (GRA), Roubaix (RBX), London (LON), Warsaw (WAW), Frankfurt (FRA)
-----
SBG-3
- Situation : Datacentre operational since 18 March
- Electrical restart / Network : Accomplished
- Server restart : VPS, Public Cloud, Bare Metal Cloud, Hosted Private Cloud, Veeam Cloud Connect and Veeam Managed Backup services have started to be restored. (2).
-----
SBG-4
- Situation : Datacentre operational.
- Electrical restart : Accomplished
- Network restart : Accomplished
- Server restart : 100% of Bare Metal customer servers are accessible.

(1) / (2) Additional information on the progress of operations:

• SBG1: rooms A to D:
o Servers to be transferred to racks in SBG4 with a scheduled return to service from Wednesday 30/03.
• SBG1: rooms 61E and 62E:
o Teams are working in rotation to clean all servers located in these rooms throughout the weekend, and will be finished by Tuesday 30/03 in Croix.
o The cleaned and tested servers will then be returned to the different datacentres (RBX, GRA, SBG4) and set up in their new racks.
o The services are scheduled to be gradually restarted between Thursday 01/04 and Friday 02/04.

• SBG3: the cleaning work on all Bare Metal servers is expected to be completed by Wednesday 31/03.


• SBG Service Status Pages - OVHcloud Control Panel
A view per datacentre is available per service in the Control Panel.

For Public Cloud customers who have services in Strasbourg in racks that are being cleaned, and who have not yet recovered their services, a notification has been added to their Control Panel:

Priority 2: Provisioning of infrastructure for our customers in other datacentres

• For customers who have been impacted, we are offering replacement infrastructures (Bare Metal, Hosted Private Cloud and Public Cloud) in our other datacentres in Gravelines (GRA), Roubaix (RBX), London (LON), Warsaw (WAW), and Frankfurt (FRA).
• We are committed to providing nearly 15,000 new servers to our customers in the coming weeks.
• Due to the current demand, delivery times on our Bare Metal Cloud services may take longer than usual. Our teams are fully mobilised, and we are working hard to deliver to our customers as quickly as possible, especially all affected customers.
• On the other hand, Public Cloud, Web Cloud and VPS services are being delivered as normal in all datacentres.

Update on quantities delivered since 10th March:


Cloud Universe :
- Baremetal
+Bare Metal - servers - Quantity : 7484
+NAS-HA - TB - Quantity : 259
- Public Cloud
+VPS - VM - Quantity : 16557
- Hosted Private Cloud
+Host - servers - Quantity : 887
+Datastore
+Number of Zpool : 813
+Volume of TB : 4698

Priority 3: Implementing all DRP (Disaster Recovery Plan) mechanisms with our customers

• Our Support teams and Technical Account Managers are in contact with our customers and have a support plan in place.

Communications

• The latest video from Octave Klaba, founder of OVHcloud, is available on his Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) account.
• The OVHcloud Community platform is now available to interact with community members and support you.
• An FAQ is available here(https://help.ovhcloud.com/en-gb/faq/strasbourg-incident/).
• To follow updates about this situation in real time:
o Our main communications feed: Task Status
o Octave Klaba, founder of OVHcloud Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) account.
o OVHcloud Twitter: https://twitter.com/ovhcloud

Our mission remains to provide our customers with the highest quality of service to support their online business and we know how important this is to them. We sincerely apologise any inconveniences related this situation. An investigation into the cause is underway. Whatever the cause of the incident, OVHcloud is currently evaluating potential technical and operational measures to bring solutions to all affected customers.

All of our communication channels, including our incident tracking platform, can be accessed so that you can stay informed of developments in real time.

-----------------------------------------------

Informations client :

• SBG1 : les serveurs récupérables Bare Metal Cloud sont en cours de nettoyage pour être remontés sur Strasbourg (SBG3 et SBG4).
La remise en service se fera progressivement pour le début de la semaine prochaine (après inspection et nettoyage réalisés).
• SBG3 est opérationnel : 84% des services Bare Metal Cloud (VPS) ont été remis à disposition des clients avec un objectif de 90% le 28 mars au soir.
• SBG4 est opérationnel : 100% des serveurs Bare Metal Cloud sont à disposition des clients.

Ci-dessous le statut des services localisés dans ces datacentres :

SBG3
Public Cloud :
+ Public Cloud Instance - 90%*
+ Public Cloud Storage - Redémarrage progressif des services depuis le 27 mars**
Les services non restitués aux clients le seront lundi 29.03 et mardi 30.03.

Hosted Private Cloud : Redémarrage progressif des services en cours, dépendant de la configuration initiale des services, avec un planning en rotation 7j/7.
Veeam Cloud Connect : Redémarrage progressif des services depuis le 25 mars.
Bare Metal Cloud :
+ VPS : 84%* avec un objectif de 90% fin de journée.
+ Bare Metal : 80% avec un objectif de 85% fin de journée.
SBG4
Bare Metal Cloud :
+ Bare Metal : 100%*

* Le rétablissement des services s'effectue suivant un planning de redémarrage salle par salle, allée par allée et baie par baie. Toutefois, le nettoyage des serveurs est impératif et conditionne la date de remise en service de certaines baies. Retrouvez des informations complémentaires sur notre processus de nettoyage via ce lien (https://www.linkedin.com/posts/octave-klaba-3a0b3632_update-march26-7am-sbg4-all-servers-in-activity-6781098337518043136-GSYg).
Le temps de nettoyage d’une baie est aujourd’hui de 7 heures et nos équipes améliorent cette cadence de jour en jour.
Ce planning est également dépendant des protocoles de sécurité et de Covid-19, définis pour les interventions sur site, ayant pour objectifs de préserver la santé et assurer la sécurité de nos équipes techniques.

**Le backups étant hébergés sur des services Public Cloud Storage, le redémarrage des services PCS occasionnera la mise à disposition de nombreux backups.

• Dans la section documentation & tutoriels(https://docs.ovh.com/fr/), tous les tutoriels utiles pour accompagner tous les clients concernés ont été mis en avant.
• Le suivi en temps réel du redémarrage de SBG par salle et par baie est accessible via : http://status.ovh.com/vms/sbg/

Priorité #1 : rétablissement des services pour nos clients

• Tableau récapitulatif du statut de chaque datacentre

SBG-1
- Situation : Datacentre non remis en service. Après inspection et expertise, les équipes techniques peuvent accéder aux salles.
- Redémarrage des Serveurs : Déplacement des serveurs récupérables après inspection et nettoyage, vers d’autres datacentres : Gravelines (GRA), Roubaix (RBX), Croix (CRX) et Strasbourg (SBG4) pour remise en service.
Remise en service des serveurs après nettoyage dans le milieu de la semaine du 29 mars (1).

-----
SBG-2
- Situation : Datacentre arrêté et mis en sécurité.
- Redémarrage des Serveurs : Remplacement des infrastructures sur d’autres datacenters : Gravelines (GRA), Roubaix (RBX), Londres (LON), Varsovie (WAW), Francfort (FRA)
-----
SBG-3
- Situation : Datacentre opérationnel depuis le 18/03.
- Redémarrage électrique / Réseau: Réalisé
- Redémarrage des Serveurs : Les services VPS, Public Cloud, Bare Metal Cloud, Hosted Private Cloud, Veeam Cloud Connect et Veeam Managed Backup ont commencé à être rétablis (2).
-----
SBG-4
- Situation : Datacentre opérationnel.
- Redémarrage électrique / Réseau : Réalisé
- Redémarrage des Serveurs : 100% des serveurs Bare Metal Cloud clients sont accessibles.

Informations complémentaires sur le déroulement des opérations (1) et (2) :

• SBG1 : salles A à D :
o Transfert des serveurs dans des baies à SBG4 et remise en service planifiée partir de mercredi 30/03.
• SBG1 : salle 61E et 62E :
o Le nettoyage de tous les serveurs localisés dans ces salles continue tout le week-end avec des équipes en rotation et sera terminé pour le mardi 30/03 à Croix.
o Les serveurs nettoyés et testés sont ensuite renvoyés dans les différents datacentres (RBX, GRA, SBG4) et reconnectés dans de nouvelles baies.
o Le redémarrage progressif des services est planifié entre le jeudi 01/04 et le vendredi 02/04.

• SBG3 : le nettoyage de de tous les serveurs Bare Metal sera finalisé probablement pour mercredi 31 mars.

• Pages états des services SBG – Espace client
Une vue par datacentre est disponible par service dans l’espace client.

Pour les clients Public Cloud du site de Strasbourg (SBG) qui n’auraient pas encore recouvré leur(s) service(s) localisés dans des baies en cours de nettoyage, une notification a été rajoutée dans leur espace client :


Priorité #2 : mise à disposition d’infrastructures pour nos clients affectés dans d’autres datacentres

• Nous proposons aux clients concernés une infrastructure de remplacement (Bare Metal Cloud, Hosted Private Cloud et Public Cloud) dans nos autres datacentres de Gravelines (GRA), Roubaix (RBX), Londres (LON), Varsovie (WAW) et Francfort (FRA).
• Nous nous engageons à mettre près de 15 000 nouveaux serveurs à disposition de nos clients dans les prochaines semaines.
• En raison de la demande actuelle, les délais de livraison sur nos services Bare Metal Cloud sont plus longs qu’habituellement. Nos équipes sont pleinement mobilisées et nous mettons tout en œuvre pour livrer nos clients au plus vite, en particulier les clients concernés.
• En revanche les livraisons des services Public cloud, Web Cloud, VPS sont nominales sur tous les datacentres.

Point sur les quantités livrées depuis le 10/03 :

Cloud Universe :
- Baremetal
+Bare Metal - servers - Quantity : 7484
+NAS-HA - TB - Quantity : 259
- Public Cloud
+VPS - VM - Quantity : 16557
- Hosted Private Cloud
+Host - servers - Quantity : 887
+Datastore
+Number of Zpool : 813
+Volume of TB : 4698

Priorité #3 : mise en œuvre avec nos clients de tous les mécanismes de PRA (Plan de Reprise d’Activité)

• Nos équipes Support et nos Technical Account Managers sont en lien avec nos clients et ont mis en place un plan d’assistance.

Communication

• La dernière vidéo d’Octave Klaba, fondateur d’OVHcloud est accessible en ligne sur son compte Twitter (https://twitter.com/olesovhcom/status/1374038409707188231).

• La plateforme communautaire OVHcloud Community (https://community.ovh.com/) est disponible pour interagir avec les membres de la communauté et vous accompagner.

• Une FAQ est toujours disponible ici (https://help.ovhcloud.com/fr/faq/incendie-strasbourg/).

• Pour suivre l’évolution de la situation en temps réel :
o Notre principal canal de communication reste notre espace « Travaux ».
o Le compte Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) d’Octave Klaba, fondateur d’OVHcloud.
o Le compte Twitter OVHcloud : https://twitter.com/ovhcloud_fr

Notre mission reste de fournir à nos clients la plus haute qualité de service, pour soutenir leur activité en ligne. Et nous savons combien cela est important pour eux. Nous leur présentons nos sincères excuses pour les inconvénients relatifs à cette situation. Une enquête est en cours sur la cause de celle-ci. Quelle que soit son origine, OVHcloud évalue actuellement les mesures techniques et opérationnelles potentielles visant à apporter des solutions aux clients concernés.

Tous nos canaux de communication, à commencer par notre plateforme de suivi d’incidents, sont accessibles pour vous tenir informés en temps réel sur l’évolution de la situation.


Comment by OVH - Monday, 29 March 2021, 21:49PM

Customer information:

• SBG1: The recoverable Bare Metal Cloud servers are being cleaned for reinstallation in Strasbourg (SBG3 and SBG4). They will be gradually restarted at the beginning of this week.
• SBG3 is operational: 90% of VPS services and 85% of Bare Metal Cloud services have been made available to customers again.
• SBG4 is operational: 100% of Bare Metal servers are available to customers.

Below is the status of the services located in these datacentres:

SBG3
Public Cloud :
+ Public Cloud Instance - 90%*
+ Public Cloud Storage - Services will be returned to customers in read-only mode on the evening of Monday 29/03, with write access by Tuesday 30/03.**

Hosted Private Cloud : Services are being gradually restarted, depending on their initial configuration, on a round the clock, 24/7, rotation schedule.
Veeam Cloud Connect/Veeam Managed Backup : The services are available to customers.
Baremetal Cloud
+ VPS : 90%*
+ Bare Metal : 85%*

SBG4
Baremetal Cloud
+ Bare Metal : 100%*


*The restoration of services is carried out according to a restart schedule room by room, aisle by aisle and rack by rack. However, server cleanup is required, and this will determine when certain racks are put back into to service. Find out more about our cleaning process via this link (https://www.linkedin.com/posts/octave-klaba-3a0b3632_update-march26-7am-sbg4-all-servers-in-activity-6781098337518043136-GSYg).
Today, the cleaning time for a rack is 7 hours, and our teams are improving this every day.
This schedule is also subject to Covid-19 and security protocols, defined for on-site interventions, with the goal of maintaining the health and ensuring the safety of our technical teams.
In addition, the current health restrictions have also affected logistics at our Strasbourg (SBG) site. We have had to source travel, accommodation and catering for all our employees who have come in to assist on site, while respecting government protocols, which of course made the operations more complex.

**As backups are hosted on Public Cloud Storage services, restarting the PCS services will result in many backups being made available.

• In the documentation & tutorials (https://docs.ovh.com/gb/en/) section, all tutorials useful for assisting all affected customers have been highlighted.
• Real-time monitoring of the restart of SBG by room and rack is available at: http://status.ovh.com/vms/sbg/

Priority 1: Restoring services to our customers

• Status summary for each datacentre

SBG-1
- Situation : Datacentre not reactivated. After inspection by teams with expertise, technical teams can access the rooms.
- Server restart : Moving recoverable servers after inspection and cleaning, to our other datacentres: Gravelines (GRA), Roubaix (RBX), Croix (CRX) and Strasbourg (SBG4) to return to service.
After cleaning, the servers will be restarted by mid-week of 29 March.(1)

-----
SBG-2
- Situation : Datacentre switched off and secured.
- Server restart : Replacement of infrastructure in other datacentres: Gravelines (GRA), Roubaix (RBX), London (LON), Warsaw (WAW), Frankfurt (FRA)
-----
SBG-3
- Situation : Datacentre operational since 18 March
- Electrical restart / Network : Accomplished
- Server restart : VPS, Public Cloud, Bare Metal Cloud, Hosted Private Cloud, Veeam Cloud Connect and Veeam Managed Backup services have started to be restored. (2).
-----
SBG-4
- Situation : Datacentre operational.
- Electrical restart : Accomplished
- Network restart : Accomplished
- Server restart : 100% of Bare Metal customer servers are accessible.

(1) / (2) Additional information on the progress of operations:

• SBG1: rooms A to D:
o Servers to be transferred to racks in SBG4 with a scheduled return to service from Wednesday 30/03.
• SBG1: rooms 61E and 62E:
o Teams are continuing to work in rotation in two eight-hour shifts to clean all servers located in these rooms at our production site in Croix, and will finish by Tuesday 30/03.
o A total of 1,212 servers have been received in Croix:
 As of Monday 29/03 at 15:00, 805 had been cleaned.
 216 have been retouched (power supply and casing changed): 87 have been tested and are operational, 107 are still being tested (the rest are out of order or waiting to be repaired).
 The cleaned and tested servers will then be gradually returned, already in their rack.
 Server transfers at our Strasbourg (SBG3) site: 48 hours between on-site transfer and reboot.
The services are scheduled to be gradually restarted from Thursday 01/04, with the last servers to be restarted between the 07/04 and 08/04.

• SBG3:
• the cleaning work on all Bare Metal servers is expected to be completed by the evening of Wednesday 31/03.
• The cleaned and tested servers will then be returned to their rack and reconnected.
• 347 servers and 59 switches from 5th floor of SBG3 are returning to our Croix site (CRX) on Wednesday for cleaning.
• The racks will then be transferred to our Strasbourg (SBG) site.
• The services are scheduled to be gradually restarted between Thursday 01/04 and Friday 02/04.

• SBG Service Status Pages - OVHcloud Control Panel
A view per datacentre is available per service in the Control Panel.

For Public Cloud customers who have services in Strasbourg in racks that are being cleaned, and who have not yet recovered their services, a notification has been added to their Control Panel:

Priority 2: Provisioning of infrastructure for our customers in other datacentres

• For customers who have been impacted, we are offering replacement infrastructures (Bare Metal, Hosted Private Cloud and Public Cloud) in our other datacentres in Gravelines (GRA), Roubaix (RBX), London (LON), Warsaw (WAW), and Frankfurt (FRA).
• We are committed to providing nearly 15,000 new servers to our customers in the coming weeks.
• Due to the current demand, delivery times on our Bare Metal Cloud services may take longer than usual. Our teams are fully mobilised, and we are working hard to deliver to our customers as quickly as possible, especially all affected customers.
• On the other hand, Public Cloud, Web Cloud and VPS services are being delivered as normal in all datacentres.

Update on quantities delivered since 10th March:


Cloud Universe :
- Baremetal
+Bare Metal - servers - Quantity : 7597
+NAS-HA - TB - Quantity : 259
- Public Cloud
+VPS - VM - Quantity : 16719
- Hosted Private Cloud
+Host - servers - Quantity : 964
+Datastore
+Number of Zpool : 823
+Volume of TB : 4718

Priority 3: Implementing all DRP (Disaster Recovery Plan) mechanisms with our customers

• Our Support teams and Technical Account Managers are in contact with our customers and have a support plan in place.

Communications

• The latest video from Octave Klaba, founder of OVHcloud, is available on his Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) account.
• The OVHcloud Community platform is now available to interact with community members and support you.
• An FAQ is available here(https://help.ovhcloud.com/en-gb/faq/strasbourg-incident/).
• To follow updates about this situation in real time:
o Our main communications feed: Task Status
o Octave Klaba, founder of OVHcloud Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) account.
o OVHcloud Twitter: https://twitter.com/ovhcloud

Our mission remains to provide our customers with the highest quality of service to support their online business and we know how important this is to them. We sincerely apologise any inconveniences related this situation. An investigation into the cause is underway. Whatever the cause of the incident, OVHcloud is currently evaluating potential technical and operational measures to bring solutions to all affected customers.

All of our communication channels, including our incident tracking platform, can be accessed so that you can stay informed of developments in real time.

-----------------------------------------------

Informations client :

• SBG1 : les serveurs récupérables Bare Metal Cloud sont en cours de nettoyage pour être remontés sur Strasbourg (SBG3 et SBG4).
La remise en service se fera progressivement pour le début de cette semaine.
• SBG3 est opérationnel : 90% des services VPS et 85% des services Bare Metal Cloud ont été remis à disposition des clients.
• SBG4 est opérationnel : 100% des serveurs Bare Metal Cloud sont à disposition des clients.

Ci-dessous le statut des services localisés dans ces datacentres :

SBG3
Public Cloud :
+ Public Cloud Instance - 90%*
+ Public Cloud Storage - Les services seront restitués au client en lecture le lundi 29.03 dans la soirée et en écriture le mardi 30.03.**

Hosted Private Cloud : Redémarrage progressif des services en cours, dépendant de la configuration initiale des services, avec un planning en rotation 7j/7.
Veeam Cloud Connect/Veeam Managed Backup : Les services sont actifs à disposition des clients.
Bare Metal Cloud :
+ VPS : 90%*
+ Bare Metal : 85%*
SBG4
Bare Metal Cloud :
+ Bare Metal : 100%*

* Le rétablissement des services s'effectue suivant un planning de redémarrage salle par salle, allée par allée et baie par baie. Toutefois, le nettoyage des serveurs est impératif et conditionne la date de remise en service de certaines baies. Retrouvez des informations complémentaires sur notre processus de nettoyage via ce lien (https://www.linkedin.com/posts/octave-klaba-3a0b3632_update-march26-7am-sbg4-all-servers-in-activity-6781098337518043136-GSYg).
Le temps de nettoyage d’une baie est aujourd’hui de 7 heures et nos équipes améliorent cette cadence de jour en jour.
Ce planning est également dépendant des protocoles de sécurité et de Covid-19, définis pour les interventions sur site, ayant pour objectifs de préserver la santé et assurer la sécurité de nos équipes techniques.
En outre, sur notre site de Strasbourg (SBG), l’enjeu relatif à la crise sanitaire a aussi été logistique. Nous avons dû résoudre le déplacement, l’hébergement et la restauration de tous nos collaborateurs venus en renfort sur site, tout en respectant le protocole gouvernemental, ce qui a forcément rendu les opérations plus complexes.

**Le backups étant hébergés sur des services Public Cloud Storage, le redémarrage des services PCS occasionnera la mise à disposition de nombreux backups.

• Dans la section documentation & tutoriels(https://docs.ovh.com/fr/), tous les tutoriels utiles pour accompagner tous les clients concernés ont été mis en avant.
• Le suivi en temps réel du redémarrage de SBG par salle et par baie est accessible via : http://status.ovh.com/vms/sbg/

Priorité #1 : rétablissement des services pour nos clients

• Tableau récapitulatif du statut de chaque datacentre

SBG-1
- Situation : Datacentre non remis en service. Après inspection et expertise, les équipes techniques peuvent accéder aux salles.
- Redémarrage des Serveurs : Déplacement des serveurs récupérables après inspection et nettoyage,
vers d’autres datacentres : Gravelines (GRA), Roubaix (RBX), Croix (CRX) et Strasbourg (SBG4) pour remise en service.
Remise en service des serveurs après nettoyage dans le milieu de cette semaine du 29 mars. (1).

-----
SBG-2
- Situation : Datacentre arrêté et mis en sécurité.
- Redémarrage des Serveurs : Remplacement des infrastructures sur d’autres datacenters : Gravelines (GRA), Roubaix (RBX), Londres (LON), Varsovie (WAW), Francfort (FRA)
-----
SBG-3
- Situation : Datacentre opérationnel depuis le 18/03.
- Redémarrage électrique / Réseau: Réalisé
- Redémarrage des Serveurs : Les services VPS, Public Cloud, Bare Metal Cloud, Hosted Private Cloud, Veeam Cloud Connect et Veeam Managed Backup ont commencé à être rétablis (2).
-----
SBG-4
- Situation : Datacentre opérationnel.
- Redémarrage électrique / Réseau : Réalisé
- Redémarrage des Serveurs : 100% des serveurs Bare Metal Cloud clients sont accessibles.

Informations complémentaires sur le déroulement des opérations (1) et (2) :

• SBG1 : salles A à D :
o Transfert des serveurs dans des baies à SBG4 et remise en service planifiée partir de mercredi 30/03.
• SBG1 : salle 61E et 62E :
o Le nettoyage de tous les serveurs localisés dans ces salles continue en 2x8 avec des équipes en rotation et sera terminé pour le mardi 30/03 sur notre site de production à Croix.
o 1212 serveurs ont été réceptionnés au total à Croix :
 805 ont été nettoyés lundi 29/03 à 15H.
 216 ont été retouchés (changement d’alimentation et de boîtier) : 87 sont testés et opérationnels, 107 sont en cours de test (le reste est hors d'usage ou à réparer).
 Les serveurs nettoyés et testés seront ensuite progressivement renvoyés déjà remis en baie.
 Transfert des serveurs sur notre site de Strasbourg (SBG3) : 48h entre le transfert et redémarrage sur site.
Le redémarrage progressif des services est planifié entre le jeudi 01/04 et les derniers serveurs entre le 07/04 et le 08/04.

• SBG3 :
• Le nettoyage de tous les serveurs Bare Metal sera finalisé probablement pour mercredi 31/03 au soir.
• Les serveurs nettoyés et testés sont ensuite renvoyés remis en baie et connectés.
• 347 serveurs et 59 switches de l'étage 5 de SBG3 reviennent sur notre site de Croix (CRX) mercredi afin d'être nettoyés.
• Le transfert des baies s’effectue ensuite vers notre site de Strasbourg (SBG).
• Le redémarrage progressif des services est planifié entre le jeudi 01/04 et vendredi 02/04.

• Pages états des services SBG – Espace client
Une vue par datacentre est disponible par service dans l’espace client.

Pour les clients Public Cloud du site de Strasbourg (SBG) qui n’auraient pas encore recouvré leur(s) service(s) localisés dans des baies en cours de nettoyage, une notification a été rajoutée dans leur espace client :


Priorité #2 : mise à disposition d’infrastructures pour nos clients affectés dans d’autres datacentres

• Nous proposons aux clients concernés une infrastructure de remplacement (Bare Metal Cloud, Hosted Private Cloud et Public Cloud) dans nos autres datacentres de Gravelines (GRA), Roubaix (RBX), Londres (LON), Varsovie (WAW) et Francfort (FRA).
• Nous nous engageons à mettre près de 15 000 nouveaux serveurs à disposition de nos clients dans les prochaines semaines.
• En raison de la demande actuelle, les délais de livraison sur nos services Bare Metal Cloud sont plus longs qu’habituellement. Nos équipes sont pleinement mobilisées et nous mettons tout en œuvre pour livrer nos clients au plus vite, en particulier les clients concernés.
• En revanche les livraisons des services Public cloud, Web Cloud, VPS sont nominales sur tous les datacentres.

Point sur les quantités livrées depuis le 10/03 :

Cloud Universe :
- Baremetal
+Bare Metal - servers - Quantity : 7597
+NAS-HA - TB - Quantity : 259
- Public Cloud
+VPS - VM - Quantity : 16719
- Hosted Private Cloud
+Host - servers - Quantity : 964
+Datastore
+Number of Zpool : 823
+Volume of TB : 4718

Priorité #3 : mise en œuvre avec nos clients de tous les mécanismes de PRA (Plan de Reprise d’Activité)

• Nos équipes Support et nos Technical Account Managers sont en lien avec nos clients et ont mis en place un plan d’assistance.

Communication

• La dernière vidéo d’Octave Klaba, fondateur d’OVHcloud est accessible en ligne sur son compte Twitter (https://twitter.com/olesovhcom/status/1374038409707188231).

• La plateforme communautaire OVHcloud Community (https://community.ovh.com/) est disponible pour interagir avec les membres de la communauté et vous accompagner.

• Une FAQ est toujours disponible ici (https://help.ovhcloud.com/fr/faq/incendie-strasbourg/).

• Pour suivre l’évolution de la situation en temps réel :
o Notre principal canal de communication reste notre espace « Travaux ».
o Le compte Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) d’Octave Klaba, fondateur d’OVHcloud.
o Le compte Twitter OVHcloud : https://twitter.com/ovhcloud_fr

Notre mission reste de fournir à nos clients la plus haute qualité de service, pour soutenir leur activité en ligne. Et nous savons combien cela est important pour eux. Nous leur présentons nos sincères excuses pour les inconvénients relatifs à cette situation. Une enquête est en cours sur la cause de celle-ci. Quelle que soit son origine, OVHcloud évalue actuellement les mesures techniques et opérationnelles potentielles visant à apporter des solutions aux clients concernés.

Tous nos canaux de communication, à commencer par notre plateforme de suivi d’incidents, sont accessibles pour vous tenir informés en temps réel sur l’évolution de la situation.


Comment by OVH - Tuesday, 30 March 2021, 17:39PM

Customer information:

• SBG1: The recoverable Bare Metal Cloud servers are being cleaned for reinstallation in Strasbourg (SBG3 and SBG4).
• SBG3 is operational: To date, 95% of VPS and Bare Metal Cloud services have been made available to customers.
The vRack (http://travaux.ovh.net/?do=details&id=49726&;) service has also been restored for a large number of SBG3 clients.
• SBG4 is operational: 100% of Bare Metal servers are available to customers.


Below is the status of the services located in these datacentres:

SBG3
Public Cloud :
+ Public Cloud Instance - 91%*
+ Public Cloud Storage - Services available and delivered to customers in read and write mode.

Hosted Private Cloud : Services are being gradually restarted, depending on their initial configuration, on a round the clock, 24/7, rotation schedule.
Veeam Cloud Connect/Veeam Managed Backup : The services are available to customers.
Baremetal Cloud
+ VPS : 95%*
+ Bare Metal : 95%*

SBG4
Baremetal Cloud
+ Bare Metal : 100%*


*The restoration of services is carried out according to a restart schedule room by room, aisle by aisle and rack by rack. However, server cleanup is required, and this will determine when certain racks are put back into to service. Find out more about our cleaning process via this link (https://www.linkedin.com/posts/octave-klaba-3a0b3632_update-march26-7am-sbg4-all-servers-in-activity-6781098337518043136-GSYg).
Today, the cleaning time for a rack is 7 hours, and our teams are improving this every day.
This schedule is also subject to Covid-19 and security protocols, defined for on-site interventions, with the goal of maintaining the health and ensuring the safety of our technical teams.
In addition, the current health restrictions have also affected logistics at our Strasbourg (SBG) site. We have had to source travel, accommodation and catering for all our employees who have come in to assist on site, while respecting government protocols, which of course made the operations more complex.

**As backups are hosted on Public Cloud Storage services, restarting the PCS services will result in many backups being made available.

• In the documentation & tutorials (https://docs.ovh.com/gb/en/) section, all tutorials useful for assisting all affected customers have been highlighted.
• Real-time monitoring of the restart of SBG by room and rack is available at: http://status.ovh.com/vms/sbg/

Priority 1: Restoring services to our customers

• Status summary for each datacentre

SBG-1
- Situation : Datacentre not reactivated. After inspection by teams with expertise, technical teams can access the rooms.
- Server restart : Moving recoverable servers after inspection and cleaning, to our other datacentres: Gravelines (GRA), Roubaix (RBX), Croix (CRX) and Strasbourg (SBG4) to return to service. Relaunch servers after cleaning from Thursday 01 April. (1).
-----
SBG-2
- Situation : Datacentre switched off and secured.
- Server restart : Replacement of infrastructure in other datacentres: Gravelines (GRA), Roubaix (RBX), London (LON), Warsaw (WAW), Frankfurt (FRA)
-----
SBG-3
- Situation : Datacentre operational since 18 March
- Electrical restart / Network : Accomplished
- Server restart : VPS, Public Cloud, Bare Metal Cloud, Hosted Private Cloud, Veeam Cloud Connect, Veeam Managed Backup and vRack services are in the process of being restored. (2).
-----
SBG-4
- Situation : Datacentre operational.
- Electrical restart : Accomplished
- Network restart : Accomplished
- Server restart : 100% of Bare Metal customer servers are accessible.

(1) / (2) Additional information on the progress of operations:

• SBG1: rooms A to D:
o Servers to be transferred to racks in SBG4 with a scheduled return to service from Wednesday 31 March.
• SBG1: rooms 61E and 62E:
o The cleaning of all the servers located in these rooms continues in two eight-hour shifts with teams in rotation at our production site in Croix.
o A total of 1,212 servers have been received in Croix:
 800 servers have been cleaned to date, 310 verified and 90 reconditioned to send to our Strasbourg (SBG) website.
 The cleaned and tested servers will then be gradually returned, already in their rack.
 Server transfers at our Strasbourg (SBG3) site: 48 hours between on-site transfer and reboot.
The services are scheduled to be gradually restarted from Thursday 01/04, with the last servers to be restarted between the 07/04 and 08/04.

• SBG3:
• the cleaning work on all Bare Metal servers is expected to be completed by the evening of Wednesday 31/03.
• The cleaned and tested servers will then be returned to their rack and reconnected.
• 347 servers and 59 switches from 5th floor of SBG3 are returning to our Croix site (CRX) on Wednesday for cleaning.
• The racks will then be transferred to our Strasbourg (SBG) site.

• SBG Service Status Pages - OVHcloud Control Panel
A view per datacentre is available per service in the Control Panel.

For Public Cloud customers who have services in Strasbourg in racks that are being cleaned, and who have not yet recovered their services, a notification has been added to their Control Panel:

Priority 2: Provisioning of infrastructure for our customers in other datacentres

• For customers who have been impacted, we are offering replacement infrastructures (Bare Metal, Hosted Private Cloud and Public Cloud) in our other datacentres in Gravelines (GRA), Roubaix (RBX), London (LON), Warsaw (WAW), and Frankfurt (FRA).
• We are committed to providing nearly 15,000 new servers to our customers in the coming weeks.
• Due to the current demand, delivery times on our Bare Metal Cloud services may take longer than usual. Our teams are fully mobilised, and we are working hard to deliver to our customers as quickly as possible, especially all affected customers.
• On the other hand, Public Cloud, Web Cloud and VPS services are being delivered as normal in all datacentres.

Update on quantities delivered since 10th March:


Cloud Universe :
- Baremetal
+Bare Metal - servers - Quantity : 7817
+NAS-HA - TB - Quantity : 259
- Public Cloud
+VPS - VM - Quantity : 17075
- Hosted Private Cloud
+Host - servers - Quantity : 1059
+Datastore
+Number of Zpool : 871
+Volume of TB : 4763

Priority 3: Implementing all DRP (Disaster Recovery Plan) mechanisms with our customers

• Our Support teams and Technical Account Managers are in contact with our customers and have a support plan in place.

Communications

• The latest video from Octave Klaba, founder of OVHcloud, is available on his Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) account.
• The OVHcloud Community platform is now available to interact with community members and support you.
• An FAQ is available here(https://help.ovhcloud.com/en-gb/faq/strasbourg-incident/).
• To follow updates about this situation in real time:
o Our main communications feed: Task Status
o Octave Klaba, founder of OVHcloud Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) account.
o OVHcloud Twitter: https://twitter.com/ovhcloud

Our mission remains to provide our customers with the highest quality of service to support their online business and we know how important this is to them. We sincerely apologise any inconveniences related this situation. An investigation into the cause is underway. Whatever the cause of the incident, OVHcloud is currently evaluating potential technical and operational measures to bring solutions to all affected customers.

All of our communication channels, including our incident tracking platform, can be accessed so that you can stay informed of developments in real time.

-----------------------------------------------

Informations client :

• SBG1 : les serveurs récupérables Bare Metal Cloud sont en cours de nettoyage pour être remontés sur Strasbourg (SBG3 et SBG4).
• SBG3 est opérationnel : à ce jour, 95% des services VPS et Bare Metal Cloud ont été remis à disposition des clients.
Le service vRack( http://travaux.ovh.net/?do=details&id=49726&;) a également été rétabli pour une grande partie des clients SBG3.
• SBG4 est opérationnel : 100% des serveurs Bare Metal Cloud sont à disposition des clients.

Ci-dessous le statut des services localisés dans ces datacentres :

SBG3
Public Cloud :
+ Public Cloud Instance - 91%*
+ Public Cloud Storage - Services disponibles et restitués aux clients en lecture et écriture.

Hosted Private Cloud : Redémarrage progressif des services en cours, dépendant de la configuration initiale des services, avec un planning en rotation 7j/7.
Veeam Cloud Connect/Veeam Managed Backup : Les services sont actifs à disposition des clients.
Bare Metal Cloud :
+ VPS : 95%*
+ Bare Metal : 95%*
SBG4
Bare Metal Cloud :
+ Bare Metal : 100%*

* Le rétablissement des services s'effectue suivant un planning de redémarrage salle par salle, allée par allée et baie par baie. Toutefois, le nettoyage des serveurs est impératif et conditionne la date de remise en service de certaines baies. Retrouvez des informations complémentaires sur notre processus de nettoyage via ce lien (https://www.linkedin.com/posts/octave-klaba-3a0b3632_update-march26-7am-sbg4-all-servers-in-activity-6781098337518043136-GSYg).
Le temps de nettoyage d’une baie est aujourd’hui de 7 heures et nos équipes améliorent cette cadence de jour en jour.
Ce planning est également dépendant des protocoles de sécurité et de Covid-19, définis pour les interventions sur site, ayant pour objectifs de préserver la santé et assurer la sécurité de nos équipes techniques.
En outre, sur notre site de Strasbourg (SBG), l’enjeu relatif à la crise sanitaire a aussi été logistique. Nous avons dû résoudre le déplacement, l’hébergement et la restauration de tous nos collaborateurs venus en renfort sur site, tout en respectant le protocole gouvernemental, ce qui a forcément rendu les opérations plus complexes.

**Le backups étant hébergés sur des services Public Cloud Storage, le redémarrage des services PCS occasionnera la mise à disposition de nombreux backups.

• Dans la section documentation & tutoriels(https://docs.ovh.com/fr/), tous les tutoriels utiles pour accompagner tous les clients concernés ont été mis en avant.
• Le suivi en temps réel du redémarrage de SBG par salle et par baie est accessible via : http://status.ovh.com/vms/sbg/

Priorité #1 : rétablissement des services pour nos clients

• Tableau récapitulatif du statut de chaque datacentre

SBG-1
- Situation : Datacentre non remis en service. Après inspection et expertise, les équipes techniques peuvent accéder aux salles.
- Redémarrage des Serveurs : Déplacement des serveurs récupérables après inspection et nettoyage,
vers d’autres datacentres : Gravelines (GRA), Roubaix (RBX), Croix (CRX) et Strasbourg (SBG4) pour remise en service.
Remise en service des serveurs après nettoyage à partir du Jeudi 01/04. (1).

-----
SBG-2
- Situation : Datacentre arrêté et mis en sécurité.
- Redémarrage des Serveurs : Remplacement des infrastructures sur d’autres datacenters : Gravelines (GRA), Roubaix (RBX), Londres (LON), Varsovie (WAW), Francfort (FRA)
-----
SBG-3
- Situation : Datacentre opérationnel depuis le 18/03.
- Redémarrage électrique / Réseau: Réalisé
- Redémarrage des Serveurs : Les services VPS, Public Cloud, Bare Metal Cloud, Hosted Private Cloud, Veeam Cloud Connect, Veeam Managed Backup et vRack ont commencé à être rétablis. (2).
-----
SBG-4
- Situation : Datacentre opérationnel.
- Redémarrage électrique / Réseau : Réalisé
- Redémarrage des Serveurs : 100% des serveurs Bare Metal Cloud clients sont accessibles.

Informations complémentaires sur le déroulement des opérations (1) et (2) :

• SBG1 : salles A à D :
o Transfert des serveurs dans des baies à SBG4 et remise en service planifiée partir de mercredi 31/03.
• SBG1 : salle 61E et 62E :
o Le nettoyage de tous les serveurs localisés dans ces salles continue en 2x8 avec des équipes en rotation sur notre site de production à Croix.
o 1212 serveurs ont été réceptionnés au total à Croix :
 800 serveurs ont été nettoyés à ce jour, 310 vérifiés et 90 reconditionnés pour envoi notre site de Strasbourg (SBG).
 Les serveurs nettoyés et testés seront ensuite progressivement renvoyés déjà remis en baie.
 Transfert des serveurs sur notre site de Strasbourg (SBG3) : 48h entre le transfert et redémarrage sur site.
Le redémarrage progressif des services est planifié entre le jeudi 01/04 et les derniers serveurs entre le 07/04 et le 08/04.

• SBG3 :
• Le nettoyage de tous les serveurs Bare Metal sera finalisé probablement pour mercredi 31/03 au soir.
• Les serveurs nettoyés et testés sont ensuite renvoyés remis en baie et connectés.
• 347 serveurs et 59 switches de l'étage 5 de SBG3 reviennent sur notre site de Croix (CRX) mercredi afin d'être nettoyés.
• Le transfert des baies s’effectue ensuite vers notre site de Strasbourg (SBG).

• Pages états des services SBG – Espace client
Une vue par datacentre est disponible par service dans l’espace client.

Pour les clients Public Cloud du site de Strasbourg (SBG) qui n’auraient pas encore recouvré leur(s) service(s) localisés dans des baies en cours de nettoyage, une notification a été rajoutée dans leur espace client :


Priorité #2 : mise à disposition d’infrastructures pour nos clients affectés dans d’autres datacentres

• Nous proposons aux clients concernés une infrastructure de remplacement (Bare Metal Cloud, Hosted Private Cloud et Public Cloud) dans nos autres datacentres de Gravelines (GRA), Roubaix (RBX), Londres (LON), Varsovie (WAW) et Francfort (FRA).
• Nous nous engageons à mettre près de 15 000 nouveaux serveurs à disposition de nos clients dans les prochaines semaines.
• En raison de la demande actuelle, les délais de livraison sur nos services Bare Metal Cloud sont plus longs qu’habituellement. Nos équipes sont pleinement mobilisées et nous mettons tout en œuvre pour livrer nos clients au plus vite, en particulier les clients concernés.
• En revanche les livraisons des services Public cloud, Web Cloud, VPS sont nominales sur tous les datacentres.


Point sur les quantités livrées depuis le 10/03 :

Cloud Universe :
- Baremetal
+Bare Metal - servers - Quantity : 7817
+NAS-HA - TB - Quantity : 259
- Public Cloud
+VPS - VM - Quantity : 17075
- Hosted Private Cloud
+Host - servers - Quantity : 1059
+Datastore
+Number of Zpool : 871
+Volume of TB : 4763

Priorité #3 : mise en œuvre avec nos clients de tous les mécanismes de PRA (Plan de Reprise d’Activité)

• Nos équipes Support et nos Technical Account Managers sont en lien avec nos clients et ont mis en place un plan d’assistance.

Communication

• La dernière vidéo d’Octave Klaba, fondateur d’OVHcloud est accessible en ligne sur son compte Twitter (https://twitter.com/olesovhcom/status/1374038409707188231).

• La plateforme communautaire OVHcloud Community (https://community.ovh.com/) est disponible pour interagir avec les membres de la communauté et vous accompagner.

• Une FAQ est toujours disponible ici (https://help.ovhcloud.com/fr/faq/incendie-strasbourg/).

• Pour suivre l’évolution de la situation en temps réel :
o Notre principal canal de communication reste notre espace « Travaux ».
o Le compte Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) d’Octave Klaba, fondateur d’OVHcloud.
o Le compte Twitter OVHcloud : https://twitter.com/ovhcloud_fr

Notre mission reste de fournir à nos clients la plus haute qualité de service, pour soutenir leur activité en ligne. Et nous savons combien cela est important pour eux. Nous leur présentons nos sincères excuses pour les inconvénients relatifs à cette situation. Une enquête est en cours sur la cause de celle-ci. Quelle que soit son origine, OVHcloud évalue actuellement les mesures techniques et opérationnelles potentielles visant à apporter des solutions aux clients concernés.

Tous nos canaux de communication, à commencer par notre plateforme de suivi d’incidents, sont accessibles pour vous tenir informés en temps réel sur l’évolution de la situation.


Comment by OVH - Wednesday, 31 March 2021, 19:46PM

Customer information:

Following the action plans in progress and the regular visibility we want to give our customers, please find the current situation below:

• SBG1: The servers in SBG1 are being inspected, cleaned and possibly repaired in Croix. Some have been returned to the Strasbourg site and are being reconnected. The first racks will be in service between tonight and tomorrow morning. Operations will continue for one week. The SBG1 site is being dismantled.
• SBG2: equivalent services in other datacentres are offered to all our customers, and we are supporting them with alternative solutions.
• SBG3 is operational: To date, 95% of VPS services and 99% of Bare Metal Cloud, Public Cloud Instance and Public Cloud Storage services have been made available to customers.
The vRack (http://travaux.ovh.net/?do=details&id=49726&;;) service has also been restored.
• SBG4 is operational: 100% of Bare Metal Cloud servers are available to customers.

Below is the status of the services located in these datacentres:

SBG3
Public Cloud :
+ Public Cloud Instance - 95%*
+ Public Cloud Storage - 99% of services available to and returned to customers in read and write mode.

Hosted Private Cloud : Services are being gradually restarted, depending on their initial configuration, on a round the clock, 24/7, rotation schedule.
Veeam Cloud Connect/Veeam Managed Backup : The services are available to customers.
Baremetal Cloud
+ VPS : 95%*
+ Bare Metal : 99%*

SBG4
Baremetal Cloud
+ Bare Metal : 100%*


*The restoration of services is carried out according to a restart schedule room by room, aisle by aisle and rack by rack. However, server cleanup is required, and this will determine when certain racks are put back into to service. Find out more about our cleaning process via this link (https://www.linkedin.com/posts/octave-klaba-3a0b3632_update-march26-7am-sbg4-all-servers-in-activity-6781098337518043136-GSYg).
Today, the cleaning time for a rack is 7 hours, and our teams are improving this every day.
This schedule is also subject to Covid-19 and security protocols, defined for on-site interventions, with the goal of maintaining the health and ensuring the safety of our technical teams.
In addition, the current health restrictions have also affected logistics at our Strasbourg (SBG) site. We have had to source travel, accommodation and catering for all our employees who have come in to assist on site, while respecting government protocols, which of course made the operations more complex.

• In the documentation & tutorials (https://docs.ovh.com/gb/en/) section, all tutorials useful for assisting all affected customers have been highlighted.
• Real-time monitoring of the restart of SBG by room and rack is available at: http://status.ovh.com/vms/sbg/

Communications



• An FAQ is available here(https://help.ovhcloud.com/en-gb/faq/strasbourg-incident/).
• To follow updates about this situation in real time:
o Our main communications feed: Task Status
o Octave Klaba, founder of OVHcloud Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) account.
o OVHcloud Twitter: https://twitter.com/ovhcloud
• The OVHcloud Community (https://community.ovh.com/en/) platform is now available to interact with community members and support you.
• The latest video from Octave Klaba, founder of OVHcloud, is available on his Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) account.

Our mission remains to provide our customers with the highest quality of service to support their online business and we know how important this is to them. We sincerely apologise any inconveniences related this situation. An investigation into the cause is underway. Whatever the cause of the incident, OVHcloud is currently evaluating potential technical and operational measures to bring solutions to all affected customers.

All of our communication channels, including our incident tracking platform, can be accessed so that you can stay informed of developments in real time.

-----------------------------------------------

Informations client :

Dans la continuité des plans d’actions en cours et de la visibilité régulière que nous avons souhaité donner à nos clients, veuillez trouver ci-dessous le point de situation à date :

• SBG1 : Les serveurs de SBG1 sont en cours d’inspection, de nettoyage et éventuellement de réparation à Croix. Certains ont été renvoyés sur le site de Strasbourg et sont en cours de reconnexion. Les premières baies vont être mises en service entre ce soir et demain matin. Les opérations se poursuivront sur une semaine. Le site SBG1 est en cours de démantèlement.
• SBG2 : les services équivalents sur d’autres datacentres sont proposés à tous nos clients que nous accompagnons vers des solutions de remplacement.
• SBG3 est opérationnel : à ce jour, 95% des services VPS et 99% des services Bare Metal Cloud, Public Cloud Instance et Public Cloud Storage ont été remis à disposition des clients.
Le service ( http://travaux.ovh.net/?do=details&id=49726&;)a également été rétabli.
• SBG4 est opérationnel : 100% des serveurs Bare Metal Cloud sont à disposition des clients.

Ci-dessous le statut des services localisés dans ces datacentres :

SBG3
Public Cloud :
+ Public Cloud Instance - 95%*
+ Public Cloud Storage - 99% des Services disponibles et restitués aux clients en lecture et écriture.

Hosted Private Cloud : Redémarrage progressif des services en cours, dépendant de la configuration initiale des services, avec un planning en rotation 7j/7.
Veeam Cloud Connect/Veeam Managed Backup : Les services sont actifs à disposition des clients.
Bare Metal Cloud :
+ VPS : 95%*
+ Bare Metal : 99%*
SBG4
Bare Metal Cloud :
+ Bare Metal : 100%*

* Le rétablissement des services s'effectue suivant un planning de redémarrage salle par salle, allée par allée et baie par baie. Toutefois, le nettoyage des serveurs est impératif et conditionne la date de remise en service de certaines baies. Retrouvez des informations complémentaires sur notre processus de nettoyage via ce lien (https://www.linkedin.com/posts/octave-klaba-3a0b3632_update-march26-7am-sbg4-all-servers-in-activity-6781098337518043136-GSYg).
Le temps de nettoyage d’une baie est aujourd’hui de 7 heures et nos équipes améliorent cette cadence de jour en jour.
Ce planning est également dépendant des protocoles de sécurité et de Covid-19, définis pour les interventions sur site, ayant pour objectifs de préserver la santé et assurer la sécurité de nos équipes techniques.
En outre, sur notre site de Strasbourg (SBG), l’enjeu relatif à la crise sanitaire a aussi été logistique. Nous avons dû résoudre le déplacement, l’hébergement et la restauration de tous nos collaborateurs venus en renfort sur site, tout en respectant le protocole gouvernemental, ce qui a forcément rendu les opérations plus complexes.

• Dans la section documentation & tutoriels(https://docs.ovh.com/fr/), tous les tutoriels utiles pour accompagner tous les clients concernés ont été mis en avant.
• Le suivi en temps réel du redémarrage de SBG par salle et par baie est accessible via : http://status.ovh.com/vms/sbg/

Communication

• Une FAQ est toujours disponible ici (https://help.ovhcloud.com/fr/faq/incendie-strasbourg/).
• Pour suivre l’évolution de la situation en temps réel :
o Notre principal canal de communication reste notre espace « Travaux ».
o Le compte Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) d’Octave Klaba, fondateur d’OVHcloud.
o Le compte Twitter OVHcloud : https://twitter.com/ovhcloud_fr
• La plateforme communautaire OVHcloud Community (https://community.ovh.com/) est disponible pour interagir avec les membres de la communauté et vous accompagner.
• La dernière vidéo d’Octave Klaba, fondateur d’OVHcloud est accessible en ligne sur son compte Twitter (https://twitter.com/olesovhcom/status/1374038409707188231).

Notre mission reste de fournir à nos clients la plus haute qualité de service, pour soutenir leur activité en ligne. Et nous savons combien cela est important pour eux. Nous leur présentons nos sincères excuses pour les inconvénients relatifs à cette situation. Une enquête est en cours sur la cause de celle-ci. Quelle que soit son origine, OVHcloud évalue actuellement les mesures techniques et opérationnelles potentielles visant à apporter des solutions aux clients concernés.

Tous nos canaux de communication, à commencer par notre plateforme de suivi d’incidents, sont accessibles pour vous tenir informés en temps réel sur l’évolution de la situation.


Comment by OVH - Thursday, 01 April 2021, 19:13PM

Customer information:

Following the action plans in progress and the regular visibility we want to give our customers, please find the current situation below:

• SBG1: The servers in SBG1 are being inspected, cleaned and possibly repaired in Croix. Some have been returned to the Strasbourg site and are being reconnected. The first are already in service today. Operations will continue for one week. The SBG1 site is being dismantled.
• SBG2: equivalent services in other datacentres are offered to all our customers, and we are supporting them with alternative solutions.
• SBG3 is operational: To date, 95% of VPS services and 99% of Bare Metal Cloud, Public Cloud Instance and Public Cloud Storage services have been made available to customers.
The vRack (http://travaux.ovh.net/?do=details&id=49726&;;;) service has also been restored.
• There was a malfunction on SBG3's energy equipment today around 6am, with no consequence on the service. Our teams put in place the necessary checks and are continuing operations on-site.
• SBG4 is operational: 100% of Bare Metal Cloud servers are available to customers.

Below is the status of the services located in these datacentres:


SBG3
Public Cloud :
+ Public Cloud Instance - 95%*
+ Public Cloud Storage - 99% of services available to and returned to customers in read and write mode.

Hosted Private Cloud : Services are being gradually restarted, depending on their initial configuration, on a round the clock, 24/7, rotation schedule.
Veeam Cloud Connect/Veeam Managed Backup : The services are available to customers.
Baremetal Cloud
+ VPS : 95%*
+ Bare Metal : 99%*

SBG4
Baremetal Cloud
+ Bare Metal : 100%*

*The restoration of services is carried out according to a restart schedule room by room, aisle by aisle and rack by rack. However, server cleanup is required, and this will determine when certain racks are put back into to service. Find out more about our cleaning process via this link (https://www.linkedin.com/posts/octave-klaba-3a0b3632_update-march26-7am-sbg4-all-servers-in-activity-6781098337518043136-GSYg).
Today, the cleaning time for a rack is 7 hours, and our teams are improving this every day.
This schedule is also subject to Covid-19 and security protocols, defined for on-site interventions, with the goal of maintaining the health and ensuring the safety of our technical teams.
In addition, the current health restrictions have also affected logistics at our Strasbourg (SBG) site. We have had to source travel, accommodation and catering for all our employees who have come in to assist on site, while respecting government protocols, which of course made the operations more complex.

• In the documentation & tutorials (https://docs.ovh.com/gb/en/) section, all tutorials useful for assisting all affected customers have been highlighted.
• Real-time monitoring of the restart of SBG by room and rack is available at: http://status.ovh.com/vms/sbg/

Communications

• An FAQ is available here(https://help.ovhcloud.com/en-gb/faq/strasbourg-incident/).
• To follow updates about this situation in real time:
o Our main communications feed: Task Status
o Octave Klaba, founder of OVHcloud Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) account.
o OVHcloud Twitter: https://twitter.com/ovhcloud
• The OVHcloud Community (https://community.ovh.com/en/) platform is now available to interact with community members and support you.
• The latest video from Octave Klaba, founder of OVHcloud, is available on his Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) account.

Our mission remains to provide our customers with the highest quality of service to support their online business and we know how important this is to them. We sincerely apologise any inconveniences related this situation. An investigation into the cause is underway. Whatever the cause of the incident, OVHcloud is currently evaluating potential technical and operational measures to bring solutions to all affected customers.

All of our communication channels, including our incident tracking platform, can be accessed so that you can stay informed of developments in real time.

-----------------------------------------------

Informations client :

Dans la continuité des plans d’actions en cours et de la visibilité régulière que nous avons souhaité donner à nos clients, veuillez trouver ci-dessous le point de situation à date :

• SBG1 : Les serveurs de SBG1 sont en cours d’inspection, de nettoyage et éventuellement de réparation à Croix. Certains ont été renvoyés sur le site de Strasbourg et sont en cours de reconnexion. Les premières baies ont été mises en service aujourd’hui. Les opérations se poursuivront sur une semaine. Le site SBG1 est en cours de démantèlement.
• SBG2 : les services équivalents sur d’autres datacentres sont proposés à tous nos clients que nous accompagnons vers des solutions de remplacement.
• SBG3 est opérationnel : à ce jour, 95% des services VPS et 99% des services Bare Metal Cloud, Public Cloud Instance et Public Cloud Storage ont été remis à disposition des clients.
Le service ( http://travaux.ovh.net/?do=details&id=49726&;)a également été rétabli.

Nous avons eu un dysfonctionnement sur un équipement énergie de SBG3 ce jour vers 6h, sans conséquence sur le service. Notre équipe a tout de suite mis en place les vérifications nécessaires. Nos équipes continuent les opérations sur site.

• SBG4 est opérationnel : 100% des serveurs Bare Metal Cloud sont à disposition des clients.

SBG3
Public Cloud :
+ Public Cloud Instance - 95%*
+ Public Cloud Storage - 99% des Services disponibles et restitués aux clients en lecture et écriture.

Hosted Private Cloud : Redémarrage progressif des services en cours, dépendant de la configuration initiale des services, avec un planning en rotation 7j/7.
Veeam Cloud Connect/Veeam Managed Backup : Les services sont actifs à disposition des clients.
Bare Metal Cloud :
+ VPS : 95%*
+ Bare Metal : 99%*
SBG4
Bare Metal Cloud :
+ Bare Metal : 100%*


* Le rétablissement des services s'effectue suivant un planning de redémarrage salle par salle, allée par allée et baie par baie. Toutefois, le nettoyage des serveurs est impératif et conditionne la date de remise en service de certaines baies. Retrouvez des informations complémentaires sur notre processus de nettoyage via ce lien (https://www.linkedin.com/posts/octave-klaba-3a0b3632_update-march26-7am-sbg4-all-servers-in-activity-6781098337518043136-GSYg).
Le temps de nettoyage d’une baie est aujourd’hui de 7 heures et nos équipes améliorent cette cadence de jour en jour.
Ce planning est également dépendant des protocoles de sécurité et de Covid-19, définis pour les interventions sur site, ayant pour objectifs de préserver la santé et assurer la sécurité de nos équipes techniques.
En outre, sur notre site de Strasbourg (SBG), l’enjeu relatif à la crise sanitaire a aussi été logistique. Nous avons dû résoudre le déplacement, l’hébergement et la restauration de tous nos collaborateurs venus en renfort sur site, tout en respectant le protocole gouvernemental, ce qui a forcément rendu les opérations plus complexes.

• Dans la section documentation & tutoriels(https://docs.ovh.com/fr/), tous les tutoriels utiles pour accompagner tous les clients concernés ont été mis en avant.
• Le suivi en temps réel du redémarrage de SBG par salle et par baie est accessible via : http://status.ovh.com/vms/sbg/

Communication

• Une FAQ est toujours disponible ici (https://help.ovhcloud.com/fr/faq/incendie-strasbourg/).
• Pour suivre l’évolution de la situation en temps réel :
o Notre principal canal de communication reste notre espace « Travaux ».
o Le compte Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) d’Octave Klaba, fondateur d’OVHcloud.
o Le compte Twitter OVHcloud : https://twitter.com/ovhcloud_fr
• La plateforme communautaire OVHcloud Community (https://community.ovh.com/) est disponible pour interagir avec les membres de la communauté et vous accompagner.
• La dernière vidéo d’Octave Klaba, fondateur d’OVHcloud est accessible en ligne sur son compte Twitter (https://twitter.com/olesovhcom/status/1374038409707188231).

Notre mission reste de fournir à nos clients la plus haute qualité de service, pour soutenir leur activité en ligne. Et nous savons combien cela est important pour eux. Nous leur présentons nos sincères excuses pour les inconvénients relatifs à cette situation. Une enquête est en cours sur la cause de celle-ci. Quelle que soit son origine, OVHcloud évalue actuellement les mesures techniques et opérationnelles potentielles visant à apporter des solutions aux clients concernés.

Tous nos canaux de communication, à commencer par notre plateforme de suivi d’incidents, sont accessibles pour vous tenir informés en temps réel sur l’évolution de la situation.


Comment by OVH - Friday, 02 April 2021, 16:55PM

----------------------------------------


Informations client :

Dans la continuité des plans d’actions en cours et de la visibilité régulière que nous avons souhaité donner à nos clients, veuillez trouver ci-dessous le point de situation à date :

• SBG1 (non détruit) : Les serveurs de SBG1 sont en cours d’inspection, de nettoyage et éventuellement de réparation à Croix. Certains ont été renvoyés sur le site de Strasbourg et sont en cours de reconnexion.
• 25% des services Bare Metal Cloud sont rétablis. L’ambition est de remettre en service 95% des services pour la fin de la semaine prochaine.
• SBG1 et SBG2 (détruit) : les services équivalents sur d’autres datacentres sont proposés à tous nos clients que nous accompagnons vers des solutions de remplacement.
• L’état d’avancement de la disponibilité des services pour les clients, à date :
• VPS : 34% des VM sont à nouveau proposées aux clients.
o L’ambition est d’atteindre 60% début de semaine prochaine et 95% en fin de semaine prochaine.
• Public Cloud Instance : 80% des VM sont proposées aux clients.
• Bare Metal Cloud : 24% des services ont été rétablis sur des serveurs situés sur d’autres sites.
• Le calendrier de rétablissement est corrélé à notre capacité de production de serveurs que nous avons multipliée par trois pour réduire les délais.
• SBG3 est opérationnel : 99% des services VPS, Bare Metal Cloud, Public Cloud Instance et Public Cloud Storage ont été remis à disposition des clients.
• SBG4 est opérationnel : 99% des serveurs Bare Metal Cloud sont à disposition des clients.

Ci-dessous le statut des services localisés dans ces datacentres :

SBG1:
Bare Metal: 25%* avec objectif 100% fin de semaine du 05/04.

SBG1 et SBG2:
VPS : 34% des VM proposées aux clients avec objectif 95% fin de semaine du 05/04.
Bare Metal : 24% des services rétablis.

Public Cloud Instance : 80% des VM proposées aux clients

SBG3
Public Cloud :
+ Public Cloud Instance - 99%*
+ Public Cloud Storage - 95% des Services disponibles et restitués aux clients en lecture et écriture.

Hosted Private Cloud : Redémarrage progressif des services en cours, dépendant de la configuration initiale des services, avec un planning en rotation 7j/7.
Veeam Cloud Connect/Veeam Managed Backup : Les services sont actifs à disposition des clients.
Bare Metal Cloud :
+ VPS : 95%*
+ Bare Metal + vRack: 99%*
SBG4
Bare Metal Cloud :
+ Bare Metal & vRack: 99%*

* Le rétablissement des services s'effectue suivant un planning de redémarrage salle par salle, allée par allée et baie par baie. Toutefois, le nettoyage des serveurs est impératif et conditionne la date de remise en service de certaines baies. Retrouvez des informations complémentaires sur notre processus de nettoyage via ce lien (https://www.linkedin.com/posts/octave-klaba-3a0b3632_update-march26-7am-sbg4-all-servers-in-activity-6781098337518043136-GSYg)
Le temps de nettoyage d’une baie est aujourd’hui de 7 heures et nos équipes améliorent cette cadence de jour en jour.
Ce planning est également dépendant des protocoles de sécurité et de Covid-19, définis pour les interventions sur site, ayant pour objectifs de préserver la santé et assurer la sécurité de nos équipes techniques.
En outre, sur notre site de Strasbourg (SBG), l’enjeu relatif à la crise sanitaire a aussi été logistique. Nous avons dû résoudre le déplacement, l’hébergement et la restauration de tous nos collaborateurs venus en renfort sur site, tout en respectant le protocole gouvernemental, ce qui a forcément rendu les opérations plus complexes.

• Dans la section documentation & tutoriels(https://docs.ovh.com/fr/), tous les tutoriels utiles pour accompagner tous les clients concernés ont été mis en avant.
• Le suivi en temps réel du redémarrage de SBG par salle et par baie est accessible via : http://status.ovh.com/vms/sbg/

Communication

• Une FAQ est toujours disponible ici (https://help.ovhcloud.com/fr/faq/incendie-strasbourg/).
• Pour suivre l’évolution de la situation en temps réel :
o Notre principal canal de communication reste notre espace « Travaux ».
o Le compte Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) d’Octave Klaba, fondateur d’OVHcloud.
o Le compte Twitter OVHcloud : https://twitter.com/ovhcloud_fr
• La plateforme communautaire OVHcloud Community (https://community.ovh.com/) est disponible pour interagir avec les membres de la communauté et vous accompagner.
• La dernière vidéo d’Octave Klaba, fondateur d’OVHcloud est accessible en ligne sur son compte Twitter (https://twitter.com/olesovhcom/status/1374038409707188231).

Notre mission reste de fournir à nos clients la plus haute qualité de service, pour soutenir leur activité en ligne. Et nous savons combien cela est important pour eux. Nous leur présentons nos sincères excuses pour les inconvénients relatifs à cette situation. Une enquête est en cours sur la cause de celle-ci. Quelle que soit son origine, OVHcloud évalue actuellement les mesures techniques et opérationnelles potentielles visant à apporter des solutions aux clients concernés.

Tous nos canaux de communication, à commencer par notre plateforme de suivi d’incidents, sont accessibles pour vous tenir informés en temps réel sur l’évolution de la situation.
La prochaine publication de ce statut est prévue le 06/04/2021.


Comment by OVH - Wednesday, 07 April 2021, 09:57AM

Customer information:

Following the action plans in progress and the regular visibility we want to give our customers, please find the current situation below:

SBG1 (rooms not destroyed):
35% of Bare Metal Cloud servers are available to customers. Our ambition is to get 95% of our services back online by the end of this week.
SBG1 (destroyed rooms) and SBG2 (destroyed): substitute servers in other datacentres are offered to all our customers in order to restore the services.
The status of service availability for customers, as of:
VPS 34% of VMs are again offered to customers.
The ambition is to reach 60% in the middle of the week and 95% at the end of this week.
Public Cloud Instance 80% of VMs are offered to customers.
Bare Metal Cloud 24% of services were restored on servers located in other sites.
The recovery schedule correlates with our server production capacity, which we have tripled to reduce time.
SBG3 is operational: SBG3 is operational: To date, 99% of VPS services and 99% of Bare Metal Cloud, Public Cloud Instance and Public Cloud Storage services have been made available to customers.

SBG4 is operational: 99% of Bare Metal Cloud servers are available to customers.

Below is the status of the services located in these datacentres:

SBG1 (Not destroyed)
Bare Metal : 35%* with target 95% weekend of 05/04.

SBG1 and SBG2 (Destroyed)
VPS : 34%* of VMs offered to customers, with a target of 95% on the weekend of 05/04.
Bare Metal : 24%* of services restored.
Public Cloud Instance : 80%* of VMs offered to customers.

SBG3
Public Cloud :
+ Public Cloud Instance - 99%*
+ Public Cloud Storage - 95% of services available to and returned to customers in read and write mode.

Hosted Private Cloud : Services are being gradually restarted, depending on their initial configuration, on a round the clock, 24/7, rotation schedule.
Veeam Cloud Connect/Veeam Managed Backup : The services are available to customers.
Baremetal Cloud
+ VPS : 99%*
+ Bare Metal + vRack : 99%*

SBG4
Baremetal Cloud
+ Bare Metal : 99%*


*The restoration of services is carried out according to a restart schedule room by room, aisle by aisle and rack by rack. However, server cleanup is required, and this will determine when certain racks are put back into to service. Find out more about our cleaning process via this link (https://www.linkedin.com/posts/octave-klaba-3a0b3632_update-march26-7am-sbg4-all-servers-in-activity-6781098337518043136-GSYg).
Today, the cleaning time for a rack is 7 hours, and our teams are improving this every day.
This schedule is also subject to Covid-19 and security protocols, defined for on-site interventions, with the goal of maintaining the health and ensuring the safety of our technical teams.
In addition, the current health restrictions have also affected logistics at our Strasbourg (SBG) site. We have had to source travel, accommodation and catering for all our employees who have come in to assist on site, while respecting government protocols, which of course made the operations more complex.

• In the documentation & tutorials (https://docs.ovh.com/gb/en/) section, all tutorials useful for assisting all affected customers have been highlighted.
• Real-time monitoring of the restart of SBG by room and rack is available at: http://status.ovh.com/vms/sbg/


Communications

• An FAQ is available here(https://help.ovhcloud.com/en-gb/faq/strasbourg-incident/).
• To follow updates about this situation in real time:
o Our main communications feed: Task Status
o Octave Klaba, founder of OVHcloud Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) account.
o OVHcloud Twitter: https://twitter.com/ovhcloud
• The OVHcloud Community (https://community.ovh.com/en/) platform is now available to interact with community members and support you.
• The latest video from Octave Klaba, founder of OVHcloud, is available on his Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) account.

Our mission remains to provide our customers with the highest quality of service to support their online business and we know how important this is to them. We sincerely apologise any inconveniences related this situation. An investigation into the cause is underway. Whatever the cause of the incident, OVHcloud is currently evaluating potential technical and operational measures to bring solutions to all affected customers.

All of our communication channels, including our incident tracking platform, can be accessed so that you can stay informed of developments in real time.

-----------------------------------------------

Informations client :

Dans la continuité des plans d’actions en cours et de la visibilité régulière que nous donnons à nos clients, veuillez trouver ci-dessous le point de la situation à date :

SBG1 (salles non endommagées) :
35% des services Bare Metal Cloud sont remis à disposition des clients. L’ambition est de remettre à disposition 95% des services pour la fin de cette semaine.
SBG1 (salles endommagées) et SBG2 (détruit) : des serveurs de substitution sur d’autres datacentres sont proposés à tous nos clients afin de rétablir les services.
L’état d’avancement de la disponibilité des services pour les clients, à date :
VPS : 34% des VM sont à nouveau proposées aux clients.
L’ambition est d’atteindre 60% en milieu de semaine et 95% en fin de semaine.
Public Cloud Instance : 80% des VM sont proposées aux clients.
Bare Metal Cloud : 24% des services ont été remis à disposition sur des serveurs situés sur d’autres sites.
Le calendrier de rétablissement est corrélé à notre capacité de production de serveurs que nous avons multipliée par trois pour réduire les délais.
SBG3 est opérationnel : 99% des services VPS, Bare Metal Cloud, Public Cloud Instance et Public Cloud Storage ont été remis à disposition des clients.
SBG4 est opérationnel : 99% des serveurs Bare Metal Cloud sont à disposition des clients.

Ci-dessous le statut des services localisés dans ces datacentres :


SBG1 (Salles non endommagées):
Bare Metal: 35%* avec objectif 95% fin de semaine du 05/04.

SBG1 et SBG2 (Salles endommagées):
VPS : 34% des VM proposées aux clients avec objectif 95% fin de semaine du 05/04.
Bare Metal : 24% des services rétablis.

Public Cloud Instance : 80% des VM proposées aux clients

SBG3
Public Cloud :
+ Public Cloud Instance - 99%*
+ Public Cloud Storage - 95% des Services disponibles et restitués aux clients en lecture et écriture.

Hosted Private Cloud : Redémarrage progressif des services en cours, dépendant de la configuration initiale des services, avec un planning en rotation 7j/7.
Veeam Cloud Connect/Veeam Managed Backup : Les services sont actifs à disposition des clients.
Bare Metal Cloud :
+ VPS : 99%*
+ Bare Metal + vRack: 99%*
SBG4
Bare Metal Cloud :
+ Bare Metal & vRack: 99%*


* Le rétablissement des services s'effectue suivant un planning de redémarrage salle par salle, allée par allée et baie par baie. Toutefois, le nettoyage des serveurs est impératif et conditionne la date de remise en service de certaines baies. Retrouvez des informations complémentaires sur notre processus de nettoyage via ce lien (https://www.linkedin.com/posts/octave-klaba-3a0b3632_update-march26-7am-sbg4-all-servers-in-activity-6781098337518043136-GSYg)
Le temps de nettoyage d’une baie est aujourd’hui de 7 heures et nos équipes améliorent cette cadence de jour en jour.
Ce planning est également dépendant des protocoles de sécurité et de Covid-19, définis pour les interventions sur site, ayant pour objectifs de préserver la santé et assurer la sécurité de nos équipes techniques.
En outre, sur notre site de Strasbourg (SBG), l’enjeu relatif à la crise sanitaire a aussi été logistique. Nous avons dû résoudre le déplacement, l’hébergement et la restauration de tous nos collaborateurs venus en renfort sur site, tout en respectant le protocole gouvernemental, ce qui a forcément rendu les opérations plus complexes.

• Dans la section documentation & tutoriels(https://docs.ovh.com/fr/), tous les tutoriels utiles pour accompagner tous les clients concernés ont été mis en avant.
• Le suivi en temps réel du redémarrage de SBG par salle et par baie est accessible via : http://status.ovh.com/vms/sbg/

Communication

• Une FAQ est toujours disponible ici (https://help.ovhcloud.com/fr/faq/incendie-strasbourg/).
• Pour suivre l’évolution de la situation en temps réel :
o Notre principal canal de communication reste notre espace « Travaux ».
o Le compte Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) d’Octave Klaba, fondateur d’OVHcloud.
o Le compte Twitter OVHcloud : https://twitter.com/ovhcloud_fr
• La plateforme communautaire OVHcloud Community (https://community.ovh.com/) est disponible pour interagir avec les membres de la communauté et vous accompagner.
• La dernière vidéo d’Octave Klaba, fondateur d’OVHcloud est accessible en ligne sur son compte Twitter (https://twitter.com/olesovhcom/status/1374038409707188231).

Notre mission reste de fournir à nos clients la plus haute qualité de service, pour soutenir leur activité en ligne. Et nous savons combien cela est important pour eux. Nous leur présentons nos sincères excuses pour les inconvénients relatifs à cette situation. Une enquête est en cours sur la cause de celle-ci. Quelle que soit son origine, OVHcloud évalue actuellement les mesures techniques et opérationnelles potentielles visant à apporter des solutions aux clients concernés.

Tous nos canaux de communication, à commencer par notre plateforme de suivi d’incidents, sont accessibles pour vous tenir informés en temps réel sur l’évolution de la situation.
La prochaine publication de ce statut est prévue le 06/04/2021.


Comment by OVH - Monday, 12 April 2021, 22:12PM

Customer information:

Following the action plans in progress and the regular visibility we want to give our customers, please find the current situation below:

Bare Metal :
+ 92% of servers have been delivered to customers
+ The servers have been offered in Strasbourg and our other datacentres

Public Cloud Instance :
+ 86% of the customer services have been replaced
+ The services offered are in our Gravelines (GRA) or Strasbourg (SBG) datacentres

Public Cloud Storage :
+ 99% of the customer services have been replaced
+ Services have been restored in our Roubaix (RBX) and Strasbourg (SBG) datacentres

Hosted Private Cloud :
+ 79% of services have been restored
+ Services have been restored in our Strasbourg datacentres (SBG) and other datacentres

VPS :
+ 84% of the customer services have been replaced
+ Services have been restored in our Strasbourg (SBG) datacentre and our other datacentres

*The restoration of services is carried out according to a restart schedule room by room, aisle by aisle and rack by rack. However, server cleanup is required, and this will determine when certain racks are put back into to service. Find out more about our cleaning process via this link (https://www.linkedin.com/posts/octave-klaba-3a0b3632_update-march26-7am-sbg4-all-servers-in-activity-6781098337518043136-GSYg).
Today, the cleaning time for a rack is 7 hours, and our teams are improving this every day.
This schedule is also subject to Covid-19 and security protocols, defined for on-site interventions, with the goal of maintaining the health and ensuring the safety of our technical teams.
In addition, the current health restrictions have also affected logistics at our Strasbourg (SBG) site. We have had to source travel, accommodation and catering for all our employees who have come in to assist on site, while respecting government protocols, which of course made the operations more complex.


• In the documentation & tutorials (https://docs.ovh.com/gb/en/) section, all tutorials useful for assisting all affected customers have been highlighted.
• Your vouchers are currently being prepared. They will be visible in your Control Panel at the end of the month. In the meantime, please note that we have stopped billing for your services affected in SBG, as well as the services you ordered after 10 March as a replacement.
• Real-time monitoring of the restart of SBG by room and rack is available at: http://status.ovh.com/vms/sbg/

Communications

• An FAQ is available here(https://help.ovhcloud.com/en-gb/faq/strasbourg-incident/).
• To follow updates about this situation in real time:
o Our main communications feed: Task Status
o Octave Klaba, founder of OVHcloud Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) account.
o OVHcloud Twitter: https://twitter.com/ovhcloud
• The OVHcloud Community (https://community.ovh.com/en/) platform is now available to interact with community members and support you.

Our mission remains to provide our customers with the highest quality of service to support their online business and we know how important this is to them. We sincerely apologise any inconveniences related this situation. An investigation into the cause is underway. Whatever the cause of the incident, OVHcloud is currently evaluating potential technical and operational measures to bring solutions to all affected customers.

All of our communication channels, including our incident tracking platform, can be accessed so that you can stay informed of developments in real time.

----------------------------

Informations client :

Dans la continuité des plans d’actions en cours et de la visibilité régulière que nous donnons à nos clients, veuillez trouver ci-dessous le point de la situation à date :

Bare Metal :
+ 92% des serveurs ont été relivrés aux clients
+ Les serveurs ont été proposés sur Strasbourg et nos autres datacentres

Public Cloud Instance :
+ 86% des services ont été reproposés aux clients
+ Les services proposés sont sur nos datacentres de Gravelines (GRA) ou Strasbourg (SBG)

Public Cloud Storage :
+ 99% des services ont été reproposés aux clients
+ Les services ont été rétablis sur nos datacentres de Roubaix (RBX) et Strasbourg (SBG)

Hosted Private Cloud :
+ 79% des services sont rétablis
+ Les services ont été rétablis sur nos datacentres de de Strasbourg (SBG) et nos autres datacentres

VPS :
+ 84% des services ont été reproposés aux clients
+ Les services ont été rétablis sur notre datacentre de Strasbourg (SBG) et nos autres datacentres


* Le rétablissement des services s'effectue suivant un planning de redémarrage salle par salle, allée par allée et baie par baie. Toutefois, le nettoyage des serveurs est impératif et conditionne la date de remise en service de certaines baies. Retrouvez des informations complémentaires sur notre processus de nettoyage via ce lien (https://www.linkedin.com/posts/octave-klaba-3a0b3632_update-march26-7am-sbg4-all-servers-in-activity-6781098337518043136-GSYg)
Le temps de nettoyage d’une baie est aujourd’hui de 7 heures et nos équipes améliorent cette cadence de jour en jour.
Ce planning est également dépendant des protocoles de sécurité et de Covid-19, définis pour les interventions sur site, ayant pour objectifs de préserver la santé et assurer la sécurité de nos équipes techniques.
En outre, sur notre site de Strasbourg (SBG), l’enjeu relatif à la crise sanitaire a aussi été logistique. Nous avons dû résoudre le déplacement, l’hébergement et la restauration de tous nos collaborateurs venus en renfort sur site, tout en respectant le protocole gouvernemental, ce qui a forcément rendu les opérations plus complexes.

• Dans la section documentation & tutoriels(https://docs.ovh.com/fr/), tous les tutoriels utiles pour accompagner tous les clients concernés ont été mis en avant.
• La disponibilité de vos vouchers est en cours de développement. Ils seront visibles dans votre manager dès la fin du mois. En attendant, sachez que nous avons stoppé la facturation de vos services impactés à SBG ainsi que celle des services que vous avez commandés après le 10 mars en remplacement.
• Le suivi en temps réel du redémarrage de SBG par salle et par baie est accessible via : http://status.ovh.com/vms/sbg/

Communication

• Une FAQ est toujours disponible ici (https://help.ovhcloud.com/fr/faq/incendie-strasbourg/).
• Pour suivre l’évolution de la situation en temps réel :
o Notre principal canal de communication reste notre espace « Travaux ».
o Le compte Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) d’Octave Klaba, fondateur d’OVHcloud.
o Le compte Twitter OVHcloud : https://twitter.com/ovhcloud_fr
• La plateforme communautaire OVHcloud Community (https://community.ovh.com/) est disponible pour interagir avec les membres de la communauté et vous accompagner.

Notre mission reste de fournir à nos clients la plus haute qualité de service, pour soutenir leur activité en ligne. Et nous savons combien cela est important pour eux. Nous leur présentons nos sincères excuses pour les inconvénients relatifs à cette situation. Une enquête est en cours sur la cause de celle-ci. Quelle que soit son origine, OVHcloud évalue actuellement les mesures techniques et opérationnelles potentielles visant à apporter des solutions aux clients concernés.


Comment by OVH - Wednesday, 14 April 2021, 22:30PM

Customer information:

Following the action plans in progress and the regular visibility we want to give our customers, please find the current situation below:

Bare Metal :
+ 95% of servers have been delivered to customers
+ The servers have been offered in Strasbourg and our other datacentres

Public Cloud Instance :
+ 86% of the customer services have been replaced
+ The services offered are in our Gravelines (GRA) or Strasbourg (SBG) datacentres

Public Cloud Storage :
+ 99% of the customer services have been replaced
+ Services have been restored in our Roubaix (RBX) and Strasbourg (SBG) datacentres

Hosted Private Cloud :
+ 85% of services have been restored
+ Services have been restored in our Strasbourg datacentres (SBG) and other datacentres

VPS :
+ 86% of the customer services have been replaced
+ Services have been restored in our Strasbourg (SBG) datacentre and our other datacentres

The process of moving cleaned servers from SBG1 to SBG3 has started and the first servers are operational since this afternoon.
Our priority is to continue to restore services for all affected customers.


*The restoration of services is carried out according to a restart schedule room by room, aisle by aisle and rack by rack. However, server cleanup is required, and this will determine when certain racks are put back into to service. Find out more about our cleaning process via this link (https://www.linkedin.com/posts/octave-klaba-3a0b3632_update-march26-7am-sbg4-all-servers-in-activity-6781098337518043136-GSYg).
Today, the cleaning time for a rack is 7 hours, and our teams are improving this every day.
This schedule is also subject to Covid-19 and security protocols, defined for on-site interventions, with the goal of maintaining the health and ensuring the safety of our technical teams.
In addition, the current health restrictions have also affected logistics at our Strasbourg (SBG) site. We have had to source travel, accommodation and catering for all our employees who have come in to assist on site, while respecting government protocols, which of course made the operations more complex.


• In the documentation & tutorials (https://docs.ovh.com/gb/en/) section, all tutorials useful for assisting all affected customers have been highlighted.
• Your vouchers are currently being prepared. They will be visible in your Control Panel at the end of the month. In the meantime, please note that we have stopped billing for your services affected in SBG, as well as the services you ordered after 10 March as a replacement.
• Real-time monitoring of the restart of SBG by room and rack is available at: http://status.ovh.com/vms/sbg/

Communications

• An FAQ is available here(https://help.ovhcloud.com/en-gb/faq/strasbourg-incident/).
• To follow updates about this situation in real time:
o Our main communications feed: Task Status
o Octave Klaba, founder of OVHcloud Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) account.
o OVHcloud Twitter: https://twitter.com/ovhcloud
• The OVHcloud Community (https://community.ovh.com/en/) platform is now available to interact with community members and support you.

Our mission remains to provide our customers with the highest quality of service to support their online business and we know how important this is to them. We sincerely apologise any inconveniences related this situation. An investigation into the cause is underway. Whatever the cause of the incident, OVHcloud is currently evaluating potential technical and operational measures to bring solutions to all affected customers.

All of our communication channels, including our incident tracking platform, can be accessed so that you can stay informed of developments in real time.

----------------------------

Informations client :

Dans la continuité des plans d’actions en cours et de la visibilité régulière que nous donnons à nos clients, veuillez trouver ci-dessous le point de la situation à date :

Bare Metal :
+ 95% des serveurs ont été relivrés aux clients
+ Les serveurs ont été proposés sur Strasbourg et nos autres datacentres

Public Cloud Instance :
+ 86% des services ont été reproposés aux clients
+ Les services proposés sont sur nos datacentres de Gravelines (GRA) ou Strasbourg (SBG)

Public Cloud Storage :
+ 99% des services ont été reproposés aux clients
+ Les services ont été rétablis sur nos datacentres de Roubaix (RBX) et Strasbourg (SBG)

Hosted Private Cloud :
+ 85% des services sont rétablis
+ Les services ont été rétablis sur nos datacentres de de Strasbourg (SBG) et nos autres datacentres

VPS :
+ 86% des services ont été reproposés aux clients
+ Les services ont été rétablis sur notre datacentre de Strasbourg (SBG) et nos autres datacentres

La mise en service des serveurs de SBG1 nettoyés vers SBG3 a commencé et les premiers serveurs sont opérationnels depuis ce cet après-midi.
Notre priorité est de continuer à rétablir les services pour tous les clients concernés.

* Le rétablissement des services s'effectue suivant un planning de redémarrage salle par salle, allée par allée et baie par baie. Toutefois, le nettoyage des serveurs est impératif et conditionne la date de remise en service de certaines baies. Retrouvez des informations complémentaires sur notre processus de nettoyage via ce lien (https://www.linkedin.com/posts/octave-klaba-3a0b3632_update-march26-7am-sbg4-all-servers-in-activity-6781098337518043136-GSYg)
Le temps de nettoyage d’une baie est aujourd’hui de 7 heures et nos équipes améliorent cette cadence de jour en jour.
Ce planning est également dépendant des protocoles de sécurité et de Covid-19, définis pour les interventions sur site, ayant pour objectifs de préserver la santé et assurer la sécurité de nos équipes techniques.
En outre, sur notre site de Strasbourg (SBG), l’enjeu relatif à la crise sanitaire a aussi été logistique. Nous avons dû résoudre le déplacement, l’hébergement et la restauration de tous nos collaborateurs venus en renfort sur site, tout en respectant le protocole gouvernemental, ce qui a forcément rendu les opérations plus complexes.

• Dans la section documentation & tutoriels(https://docs.ovh.com/fr/), tous les tutoriels utiles pour accompagner tous les clients concernés ont été mis en avant.
• La disponibilité de vos vouchers est en cours de développement. Ils seront visibles dans votre manager dès la fin du mois. En attendant, sachez que nous avons stoppé la facturation de vos services impactés à SBG ainsi que celle des services que vous avez commandés après le 10 mars en remplacement.
• Le suivi en temps réel du redémarrage de SBG par salle et par baie est accessible via : http://status.ovh.com/vms/sbg/

Communication

• Une FAQ est toujours disponible ici (https://help.ovhcloud.com/fr/faq/incendie-strasbourg/).
• Pour suivre l’évolution de la situation en temps réel :
o Notre principal canal de communication reste notre espace « Travaux ».
o Le compte Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) d’Octave Klaba, fondateur d’OVHcloud.
o Le compte Twitter OVHcloud : https://twitter.com/ovhcloud_fr
• La plateforme communautaire OVHcloud Community (https://community.ovh.com/) est disponible pour interagir avec les membres de la communauté et vous accompagner.

Notre mission reste de fournir à nos clients la plus haute qualité de service, pour soutenir leur activité en ligne. Et nous savons combien cela est important pour eux. Nous leur présentons nos sincères excuses pour les inconvénients relatifs à cette situation. Une enquête est en cours sur la cause de celle-ci. Quelle que soit son origine, OVHcloud évalue actuellement les mesures techniques et opérationnelles potentielles visant à apporter des solutions aux clients concernés.


Comment by OVH - Friday, 16 April 2021, 17:32PM

Customer information:

Following the action plans in progress and the regular visibility we want to give our customers, please find the current situation below:

Bare Metal :
+ 98% of servers have been re-delivered to customers
+ The servers have been offered in Strasbourg and our other datacentres

Public Cloud Instance :
+ 95% of services have been offered to customers
+ The services offered are in our Gravelines (GRA) or Strasbourg (SBG) datacentres

Public Cloud Storage :
+ 99% of the customer services have been replaced
+ Services have been restored in our Roubaix (RBX) and Strasbourg (SBG) datacentres

Hosted Private Cloud :
+ 85% of services have been restored
+ Services have been restored in our Strasbourg datacentres (SBG) and other datacentres

VPS :
+ 95% of the customer services have been replaced
+ Services have been restored in our Strasbourg (SBG) datacentre and our other datacentres

The process of moving cleaned servers from SBG1 to SBG3 has started and the first servers are operational since this afternoon.
Our priority is to continue to restore services for all affected customers.


*The restoration of services is carried out according to a restart schedule room by room, aisle by aisle and rack by rack. However, server cleanup is required, and this will determine when certain racks are put back into to service. Find out more about our cleaning process via this link (https://www.linkedin.com/posts/octave-klaba-3a0b3632_update-march26-7am-sbg4-all-servers-in-activity-6781098337518043136-GSYg).
Today, the cleaning time for a rack is 7 hours, and our teams are improving this every day.
This schedule is also subject to Covid-19 and security protocols, defined for on-site interventions, with the goal of maintaining the health and ensuring the safety of our technical teams.
In addition, the current health restrictions have also affected logistics at our Strasbourg (SBG) site. We have had to source travel, accommodation and catering for all our employees who have come in to assist on site, while respecting government protocols, which of course made the operations more complex.


• In the documentation & tutorials (https://docs.ovh.com/gb/en/) section, all tutorials useful for assisting all affected customers have been highlighted.
• Your vouchers are currently being prepared. They will be visible in your Control Panel at the end of the month. In the meantime, please note that we have stopped billing for your services affected in SBG, as well as the services you ordered after 10 March as a replacement.
• Real-time monitoring of the restart of SBG by room and rack is available at: http://status.ovh.com/vms/sbg/

Communications

• An FAQ is available here(https://help.ovhcloud.com/en-gb/faq/strasbourg-incident/).
• To follow updates about this situation in real time:
o Our main communications feed: Task Status
o Octave Klaba, founder of OVHcloud Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) account.
o OVHcloud Twitter: https://twitter.com/ovhcloud
• The OVHcloud Community (https://community.ovh.com/en/) platform is now available to interact with community members and support you.

Our mission remains to provide our customers with the highest quality of service to support their online business and we know how important this is to them. We sincerely apologise any inconveniences related this situation. An investigation into the cause is underway. Whatever the cause of the incident, OVHcloud is currently evaluating potential technical and operational measures to bring solutions to all affected customers.

All of our communication channels, including our incident tracking platform, can be accessed so that you can stay informed of developments in real time.

------------------------------------------------------------------------------------


Informations client :

Dans la continuité des plans d’actions en cours et de la visibilité régulière que nous donnons à nos clients, veuillez trouver ci-dessous le point de la situation à date :

Bare Metal :
+ 98% des serveurs ont été relivrés aux clients
+ Les serveurs ont été proposés sur Strasbourg et nos autres datacentres

Public Cloud Instance :
+ 95% des services ont été reproposés aux clients
+ Les services proposés sont sur nos datacentres de Gravelines (GRA) ou Strasbourg (SBG)

Public Cloud Storage :
+ 99% des services ont été reproposés aux clients
+ Les services ont été rétablis sur nos datacentres de Roubaix (RBX) et Strasbourg (SBG)

Hosted Private Cloud :
+ 85% des services sont rétablis
+ Les services ont été rétablis sur nos datacentres de de Strasbourg (SBG) et nos autres datacentres

VPS :
+ 95% des services ont été reproposés aux clients
+ Les services ont été rétablis sur notre datacentre de Strasbourg (SBG) et nos autres datacentres

La mise en service des serveurs de SBG1 nettoyés vers SBG3 a commencé et les premiers serveurs sont opérationnels depuis ce cet après-midi.
Notre priorité est de continuer à rétablir les services pour tous les clients concernés.

* Le rétablissement des services s'effectue suivant un planning de redémarrage salle par salle, allée par allée et baie par baie. Toutefois, le nettoyage des serveurs est impératif et conditionne la date de remise en service de certaines baies. Retrouvez des informations complémentaires sur notre processus de nettoyage via ce lien (https://www.linkedin.com/posts/octave-klaba-3a0b3632_update-march26-7am-sbg4-all-servers-in-activity-6781098337518043136-GSYg)
Le temps de nettoyage d’une baie est aujourd’hui de 7 heures et nos équipes améliorent cette cadence de jour en jour.
Ce planning est également dépendant des protocoles de sécurité et de Covid-19, définis pour les interventions sur site, ayant pour objectifs de préserver la santé et assurer la sécurité de nos équipes techniques.
En outre, sur notre site de Strasbourg (SBG), l’enjeu relatif à la crise sanitaire a aussi été logistique. Nous avons dû résoudre le déplacement, l’hébergement et la restauration de tous nos collaborateurs venus en renfort sur site, tout en respectant le protocole gouvernemental, ce qui a forcément rendu les opérations plus complexes.

• Dans la section documentation & tutoriels(https://docs.ovh.com/fr/), tous les tutoriels utiles pour accompagner tous les clients concernés ont été mis en avant.
• La disponibilité de vos vouchers est en cours de développement. Ils seront visibles dans votre manager dès la fin du mois. En attendant, sachez que nous avons stoppé la facturation de vos services impactés à SBG ainsi que celle des services que vous avez commandés après le 10 mars en remplacement.
• Le suivi en temps réel du redémarrage de SBG par salle et par baie est accessible via : http://status.ovh.com/vms/sbg/

Communication

• Une FAQ est toujours disponible ici (https://help.ovhcloud.com/fr/faq/incendie-strasbourg/).
• Pour suivre l’évolution de la situation en temps réel :
o Notre principal canal de communication reste notre espace « Travaux ».
o Le compte Twitter (https://twitter.com/olesovhcom/status/1374038409707188231) d’Octave Klaba, fondateur d’OVHcloud.
o Le compte Twitter OVHcloud : https://twitter.com/ovhcloud_fr
• La plateforme communautaire OVHcloud Community (https://community.ovh.com/) est disponible pour interagir avec les membres de la communauté et vous accompagner.

Notre mission reste de fournir à nos clients la plus haute qualité de service, pour soutenir leur activité en ligne. Et nous savons combien cela est important pour eux. Nous leur présentons nos sincères excuses pour les inconvénients relatifs à cette situation. Une enquête est en cours sur la cause de celle-ci. Quelle que soit son origine, OVHcloud évalue actuellement les mesures techniques et opérationnelles potentielles visant à apporter des solutions aux clients concernés.