OVHcloud Network Status

Current status
Legend
  • Operational
  • Degraded performance
  • Partial Outage
  • Major Outage
  • Under maintenance
BHS4 T04CXX T04DXX
Incident Report for Network & Infrastructure
Resolved
Nous avons un incident électrique sur 2 salles de 24 baies chacune
se trouvant à BHS4. Il y a un impacte sur /cloud ainsi que sur
plusieurs baies SD. Nous cherchons l'origine du problème.

Update(s):

Date: 2016-03-10 16:12:43 UTC
Bonjour,

Vous utilisez les services d'OVH hébergés dans notre datacentre
canadien de Beauharnois (BHS). Le 5 mars dernier, vous avez été
affecté par l'incident qui a touché la salle C et D de BHS4. Au
total, 54 baies ont été impactées par cet incident dont la baie
qui héberge votre service.

À 22h40 EST (4h40 GMT), nous avons eu un défaut d'alimentation
dans la salle D. Un court-circuit particulièrement violent a
endommagé le bus d'alimentation de la salle et nous a obligé à
le remplacer. Cette opération, particulièrement complexe, a
nécessité environ 4h30 d'intervention. Après le remplacement
du bus d'alimentation, l'alimentation a pu être rétablie dans
les salles C et D. Cette panne étant anormale, OVH a donc
sollicité l'expertise du constructeur afin de trouver l'origine
du problème.

En application du SLA prévu sur vos services impactés, nous
vous proposons un dédommagement. Pour en bénéficier, il vous
suffit d'activer la procédure de compensation en vous rendant
sur https://www.ovh.com/manager/ .

Nous vous présentons nos excuses pour le désagrément occasionné.

Amicalement
Octave


---------------------------------------------------------------

Hello,

If you are using OVH services hosted at our Canadian datacenter
in Beauharnois (BHS), you may have been impacted by the incident
that affected rooms C and D of BHS4 on March 5. A total of 54 racks
have been affected by this incident, including the one hosting
your services.

At 22h40 EST (4h40 GMT), there was a power failure in room D.
A particularly violent short circuit damaged the power bus in
that room and we had to replace it. This operation is particularly
complex and took around 4 and a half hours. This is definitely
not a normal occurrence and so we requested the expertise of
the builder to determine the root cause of the problem. Once
the power bus was replaced, we were able to restore power in
rooms C and D.

We are offering you a compensation for your impacted services,
which will remain in accordance with our SLA. To take advantage
of this, all you need to do is start the compensation process
by going to this web page: To qualify, simply activate the
compensation procedure by clicking on the following link:
https://www.ovh.com/manager/.

We sincerely apologize for any inconvenience this may have caused you.

Regards,
Octave

Date: 2016-03-05 09:22:47 UTC
Pour le suivi de VPS et PCI
http://travaux.ovh.net/?do=details&id=16901
http://travaux.ovh.net/?do=details&id=16902


Date: 2016-03-05 09:04:44 UTC
Bonjour,
A 10h40pm (4h40 heure française) nous avons constaté un défaut d'alimentation
de 2 salles d'hébergement, C et D, à BHS4, sur 54 baies. Il s'agit de
baies C1-18 et D1-36. Dans ces baies nous avons le PCI/VPS et les SD.

L'origine du problème est un gros cours-circuit dans le bus qui alimente les
baies D1-18. Le court-circuit a mis en défaut l'onduleur T04D. L’équipe
d’électriciens s'est dépêchée sur place pour vérifier l'etat de l'onduleur et
de bus. L'onduleur a été remis en route. Les baies C1-18 ont été réalimentées
à 0h30am (6h30). Les baies D21-41 ont été réalimentées à 1h04am (7h04). Le
remplacement du bus a pris 2H30. A 3h30am (9h30) les baies D1-21 ont été
réalimentées. Toutes les baies sont à nouveau UP.

Nous travaillons sur la mise en route de tous les services qui ne sont pas
encore UP.

D'autres informations vont suivre.

Octave


Date: 2016-03-05 06:19:34 UTC
La moitiée de T04D est en cours de démarrage.

Date: 2016-03-05 05:32:24 UTC
Les électriciens sont en route.

Date: 2016-03-05 05:06:09 UTC
T04C est en ligne,

T04D est encore down.

Date: 2016-03-05 04:52:07 UTC
Les services commencent à revenir en ligne.

Date: 2016-03-05 04:36:39 UTC
Nous rétablissons l'électricité.
Posted Mar 05, 2016 - 04:14 UTC
This incident affected: Infrastructure || BHS (BHS1, BHS2, BHS3, BHS4, BHS5, BHS6, BHS7).