OVHcloud Network Status

Current status
Legend
  • Operational
  • Degraded performance
  • Partial Outage
  • Major Outage
  • Under maintenance
LCL Bruxelles
Incident Report for Network & Infrastructure
Resolved
Nous avons un problème sur l'un de nos équipements à Interxion Bruxelles. Ceci impact le trafic vers le BNIX et les clients ChtIX connectés sur ce site.

Update(s):

Date: 2010-06-16 11:00:13 UTC
Nous sommes revenus dans le fonctionnement normal. Les clients chtix sur LCL sont maintenant rétablis.
En cas de problème, merci de contacter noc@ovh.net.

Date: 2010-06-16 10:43:17 UTC
Nous rebasculons l'infra sur LCL dans la config nominale.

Date: 2010-06-16 09:56:47 UTC
Donc apparament le probleme est dû à une boucle sur BNIX.
Nos switchs ont été surchargés et ne pingait plus. On
pensait alors à un probleme hardware de notre côté.

On vient de remettre tous les peers BNIX en place. Plus de
probleme ...

Date: 2010-06-16 09:55:43 UTC
Jun 16 11:15:41 20G.bru-1-6k.routers.ovh.net 147: Jun 16 10:15:23 GMT: %IPV6-4-DUPLICATE: Duplicate address FE80::213:5FFF:FE1C:6500 on TenGigabitEthernet1/2.20
Jun 16 11:05:11 20G.bru-1-6k.routers.ovh.net 88: .Jun 16 10:04:55 GMT: %IPV6-4-DUPLICATE: Duplicate address FE80::213:5FFF:FE1C:6500 on TenGigabitEthernet1/2.20
Jun 16 09:33:42 20G.bru-1-6k.routers.ovh.net 606896: Jun 16 08:33:25 GMT: %IPV6-4-DUPLICATE: Duplicate address FE80::213:5FFF:FE1C:6500 on TenGigabitEthernet1/2.20
Jun 16 09:26:29 20G.bru-1-6k.routers.ovh.net 606853: Jun 16 08:26:12 GMT: %IPV6-4-DUPLICATE: Duplicate address FE80::213:5FFF:FE1C:6500 on TenGigabitEthernet1/2.20


Date: 2010-06-16 09:54:54 UTC
Hi,

There's currently an issue on the BNIX. We're investigating and hope to
resolve it as soon as possible.

Best regards,
Dear Member,

Aside from the first looped port, the BNIX staff identified a second
looped port and removed this one ASAP from the config. Everything is
back to normal now.

We acknowledge that the error lies with BNIX and we wish to apologize
for the degraded service.

Kind Regards,

-- BNIX Tech Team


Date: 2010-06-16 09:12:48 UTC
Nous avons de pertes de packets sur le lien 6K / F10.
Nous avons mis à jour le routeur bru-1-6k
http://travaux.ovh.com/?do=details&id=4288
toujours pareil.

On pense que l'optique qui est dans le routeur n'est
pas assez forte pour le lien entre les 2 datacentres.
Ca marchait avec un switch entre les 2 et en direct
ça ne marche plus.

On va se rendre sur place pour remplacer le switch
qui a cassé ce matin par un spare.

Vers 12h30 le probleme devrait être resolu.

En attandant nous allons couper BNIX.



Date: 2010-06-16 07:57:06 UTC
Pour contourner le problème provisoirement, nous avons bypassé bru-2-f10 afin de rétablir le trafic vers bru-3 (Interxion) et BNIX. Seuls les client chtix sur LCL restent impactés.

Date: 2010-06-16 07:37:41 UTC
Le problème vient probablement du lien bru-1<>bru-2 sur LCL. Cela pourrait également être un défaut sur le switch force10 lui même. Nous envoyons un tech sur place avec tout le matériel nécessaire.

Date: 2010-06-16 07:16:57 UTC
Il s'agit en fait d'un problème sur un switch situé en amont au niveau de LCL Diegem. Nous tentons un redémarrage de l'équipement. Si cela échoue, nous envoyons un technicien en urgence pour remplacement par un spare.
Posted Jun 16, 2010 - 06:28 UTC