OVHcloud Network Status

Current status
Legend
  • Operational
  • Degraded performance
  • Partial Outage
  • Major Outage
  • Under maintenance
GSW < > RBX
Incident Report for Network & Infrastructure
Resolved
Un des liens Paris GSW < > Roubaix est down.

Nous investiguons.


Update(s):

Date: 2013-01-10 05:30:44 UTC
*** CASCADED EXTERNAL NOTES 09-Jan-2013 23:40:07 GMT kepplerm From CASE: 6221887 - Event
The Transport NOC informed that the splicing team has been granted access to the fenced off civil works area and are now assessing the damage and how to proceed with repairs. The Transport NOC advised that the local contractor working in the civil works area is responsible for damaging the fiber and ducts.

*** CASCADED EXTERNAL NOTES 10-Jan-2013 01:06:36 GMT kepplerm From CASE: 6221887 - Event
The Transport NOC reported that the fiber cable repair is in progress at this time and
an estimated time for splicing to begin on the first end of the fiber cable is 02:00 GMT.
The second end of the fiber cable is expected to be prepared for splicing shortly. No
estimated restoral time is available currently.

*** CASCADED EXTERNAL NOTES 10-Jan-2013 02:38:20 GMT kepplerm From CASE: 6221887 - Event
The Transport NOC advised that the splicing team is nearly complete with the fiber cable
repair. It has been informed that alarms are beginning to clear but no estimated restoral
time could be provided at this time.

*** CASCADED EXTERNAL NOTES 10-Jan-2013 03:12:13 GMT caddeler From CASE: 6221887 - Event
The Transport NOC advised the splicing has been completed and all services have been restored.



Date: 2013-01-10 02:34:45 UTC
Le lien est opérationnel.


RP/0/RSP0/CPU0:rbx-g2-a9#sh inter description | i gsw
Thu Jan 10 02:30:06.896 UTC
BE30 up up 1|gsw-g1-a9
BE32 up up 2|gsw-g1-a9
Te0/0/0/8 up up 1|gsw-g1-a9
Te0/0/0/9 up up 1|gsw-g1-a9
Te0/1/0/8 up up 2|gsw-g1-a9
Te0/1/0/9 up up 2|gsw-g1-a9
Te0/2/0/1 up up 1|gsw-g1-a9
Te0/3/0/1 up up 2|gsw-g1-a9
Te0/4/0/6 up up 2|gsw-g1-a9
Te0/4/0/7 up up 2|gsw-g1-a9
Te0/5/0/6 up up 2|gsw-g1-a9
Te0/5/0/7 up up 2|gsw-g1-a9
Te0/6/0/5 up up 1|gsw-g1-a9
Te0/6/0/6 up up 1|gsw-g1-a9
Te0/6/0/7 up up 2|gsw-g1-a9
Te0/7/0/5 up up 1|gsw-g1-a9
Te0/7/0/6 up up 1|gsw-g1-a9
Te0/7/0/7 up up 1|gsw-g1-a9


Date: 2013-01-09 22:54:55 UTC
*** CASCADED EXTERNAL NOTES 09-Jan-2013 20:46:58 GMT kepplerm From CASE: 6221887 - Event
The Transport NOC reported that the splicing team is on site and the replacement fiber
is expected to arrive at approximately 21:15 so that restoration efforts can commence.

*** CASCADED EXTERNAL NOTES 09-Jan-2013 21:45:09 GMT kepplerm From CASE: 6221887 - Event
The Transport NOC is reaching out to the splicing team to confirm that the replacement
fiber has arrived on site.

*** CASCADED EXTERNAL NOTES 09-Jan-2013 22:17:59 GMT kepplerm From CASE: 6221887 - Event
The Transport NOC informed that the splicing team is still working to isolate the exact
location of the fiber cut and it has been advised that the replacement fiber is on site
at this time. No estimated restoral time is currently available.

*** CASCADED EXTERNAL NOTES 09-Jan-2013 22:40:18 GMT kepplerm From CASE: 6221887 - Event
The Transport NOC advised that the fiber damage has been isolated to a fenced off civil
works area and the splicing team is currently awaiting access to be granted so that
restoration efforts can begin.


Date: 2013-01-09 20:17:53 UTC
Apparament c'est une très grosse coupure entre Trembley
et Longueil-Sainte-Marie. Une equipe de renfort a été envoyée
sur place pour accelerer le remplacement de plusieurs centaines
de metres de la fibre arrachée par de travaux dans le coin.

Date: 2013-01-09 20:04:53 UTC
Pour info: Le reseau longe distance d'Ovh est en
cours d'upgrade vers la nouvelle technologie 100G
coherent. Ceci nous permettra d'avoir les liens
protegés à travers 2 reseaux optiques. Et donc ne
pas avoir d'impact dans le cas de coupure de fibre
meme si ça arrive très rarement (1 fois tous les
2 ans pour Paris/Roubaix).

Date: 2013-01-09 19:37:58 UTC
Nous avons essayé d'ajouter 60G sur le lien qui fonctionne
toujours en Paris et Roubaix
https://travaux.ovh.net/?do=details&id=7877
Ca ne s'est pas bien passé: l'une de cartes du routeur
a rebooté et a planté les autres cartes. Du coup on a eu
aussi un probleme sur le 2eme lien en même temps que le
1er qui a duré 10 minutes environ.

La carte morte a été declarée chez Cisco et on attend la
reception de la nouvelle carte dans environ 1H. Dés qu'on
la recoit on va l'inserer dans le chassis en esperant
qu'elle ne fasse pas planter le chassis à nouveau.

Date: 2013-01-09 17:10:42 UTC
La coupure est localisée à 64km au nord de Tremblay. Les équipes sont en route vers le lieu de l'incident.

Date: 2013-01-09 16:48:50 UTC
Le mainteneur du cable confirme un problème sur le cable. Une équipe est en route pour confirmer le fiber cut et déterminer la localisation de la coupure.

Date: 2013-01-09 16:28:47 UTC
L'une de nos liaisons fibres Paris <> Roubaix est interrompue ce qui impacte très fortement le trafic vers Paris. Nous reroutons un maximum de trafic vers Londres/Amsterdam/Francfort afin de délester notre seconde liaison.
Le problème se situe entre le site d'amplification de Marquillies et notre pop à Globalswitch Clichy. Nous ne savons pas encore s'il s'agit d'une coupure de fibre ou d'un incident sur notre équipement à Globalswitch.
Nous sommes en train d'investiguer avec le mainteneur d'une cable. Une équipe est également en route pour Globalswitch.

Date: 2013-01-09 16:24:37 UTC
Nous allons couper les liens transits sur Paris afin que le trafic s'écoule vers d'autre routeurs.
Posted Jan 09, 2013 - 15:32 UTC