OVHcloud Network Status

Current status
Legend
  • Operational
  • Degraded performance
  • Partial Outage
  • Major Outage
  • Under maintenance
sbg-d1-a75
Incident Report for Network & Infrastructure
Resolved
Une partie du trafic sortant de SBG est impacté par un incident réseau présentement en cours.

Nous investiguons.



Update(s):

Date: 2017-03-28 20:14:45 UTC
La mise à jour de sbg-d2-a75 est maintenant terminée. Celui-ci est de retour de manière active dans notre backbone.

Tout est revenu à la normal.

Merci de votre patience.

Date: 2017-03-28 19:38:30 UTC
Le reboot de sbg-d2-a75 est lancé.

Date: 2017-03-28 19:26:46 UTC
sbg-d1-a75 est maintenant mis-à-jour et à repris la gestion du trafic.

Nous commençons le processus d'isolation sur sbg-d2-a75.

Date: 2017-03-28 19:10:29 UTC
sbg-d1-a75 est up.

Le bug est fixé.

Date: 2017-03-28 18:44:13 UTC
Le reboot de sbg-d1-a75 est lancé.

Date: 2017-03-28 18:07:11 UTC
Afin de fixer le problème, nous devons redémarrer et upgrader les 2 switchs sbg-d1 et sbg-d2. Nous allons le faire en urgence en commencant par sbg-d1-a75.

Date: 2017-03-28 18:06:42 UTC
Le bug rencontré est fixé sur une version supérieur disponible pour ces équipements.

Nous allons isoler les équipements un par un et effectuer une mise à jour de l'OS utilisé sur ces équipements.





Date: 2017-03-28 17:37:02 UTC
Nous sommes en discussion avec Arista pour trouver une solution optimale afin de fixer le problème.



Date: 2017-03-28 16:36:34 UTC
Nous sommes en conférence avec Arista et leurs ingénieurs.

Nous continuons a chercher une solution non disruptive pour notre réseau.

Merci de votre patience.


Date: 2017-03-28 15:15:07 UTC
Nous sommes toujours en collaboration avec Arista pour appliquer le patch correctif.

Date: 2017-03-28 14:34:44 UTC
Lorsqu'un serveur de Strasbourg tente de rejoindre une IP sur le réseau OVH, les routeurs du datacentre sbg-d1-a75 et sbg-d2-a75 sont censés effectuer la redirection vers les équipements réseaux du datacentres de destination.

Néanmoins un bug software identifié sur cet équipement fait en sorte que les routes internes ne sont plus apprises. Le trafic est ainsi routé vers la route par défaut sbg-g2-nc5.

Ce routeur (sbg-g2-nc5) connait les routes externes uniquement. Ce routeur est configuré pour renvoyer le trafic interne vers les routers sbg-d1/d2-a75. C'est ici que la loop se produit.

Nous travaillons avec notre partenaire Arista pour appliquer un patch correctif.

Merci de votre compréhension et patience.
Posted Mar 28, 2017 - 14:14 UTC
This incident affected: Infrastructure || SBG (SBG1, SBG3, SBG4).