OVHcloud Network Status

Current status
Legend
  • Operational
  • Degraded performance
  • Partial Outage
  • Major Outage
  • Under maintenance
bhs-3b-a9
Incident Report for Network & Infrastructure
Resolved
L'équipement bhs-3b-a9 ne répond plus. Nous investiguons.

Update(s):

Date: 2017-06-01 12:40:16 UTC
Le traffic est de nouveau stable depuis 13h41 GMT+2

Date: 2017-06-01 11:18:43 UTC
Nous voyons à l'instant même de nouveau du loss.
L'équipement drop de l'arp.
Nous investiguons.

Date: 2017-06-01 10:40:08 UTC
Durant l'incident de matin, nous avons basculé certains vlans de force en les shuttant coté b afin de restaurer le traffic. Le traffic de ces vlans ne passent donc que par le A.
Voilà les vlans en question:
290, 292, 294 à 303, 305 à 310

Date: 2017-06-01 08:27:10 UTC
Cisco a évoqué un possible bug connu.
Nous allons continué l'investigation avec Cisco, mais en attendant tout est revenu à la normale dès 07h02 GMT+2 (IP des serveurs) et 07h24 GMT+2 (IPFO).

Nous allons tacher de mettre à jour dès que possible le couple de routeur.

Date: 2017-06-01 05:51:30 UTC
Cisco est toujours en train d'analyser la situation.

2017-06-01T06:29:10+02:00 198.27.73.96 bhs-3b-a9 3307013 ba [local7.crit] === 3307013: LC/0/1/CPU0:Jun 1 06:29:10 CEST: fib_mgr[183]: %ROUTING-FIB-2-OOR : FIB has run out of DATA_TYPE_TABLE_SET resource memory. No more route updates will be handled by FIB. Please delete routes, and then clear FIB on this node to resume normal operation.
2017-06-01T06:31:17+02:00 198.27.73.96 bhs-3b-a9 3307026 ba [local7.crit] === 3307026: LC/0/0/CPU0:Jun 1 06:31:17 CEST: fib_mgr[183]: %ROUTING-FIB-2-OOR : FIB has run out of DATA_TYPE_TABLE_SET resource memory. No more route updates will be handled by FIB. Please delete routes, and then clear FIB on this node to resume normal operation.
2017-06-01T06:41:40+02:00 198.27.73.96 bhs-3b-a9 3307127 be [local7.info] === 3307127: LC/0/1/CPU0:Jun 1 06:41:40 CEST: fib_mgr[183]: %ROUTING-FIB-6-RSRC_OK : FIB resource state has returned to normal. FIB has exited resource constrained operation and normal forwarding has been restored
2017-06-01T06:41:47+02:00 198.27.73.96 bhs-3b-a9 3307129 be [local7.info] === 3307129: LC/0/0/CPU0:Jun 1 06:41:47 CEST: fib_mgr[183]: %ROUTING-FIB-6-RSRC_OK : FIB resource state has returned to normal. FIB has exited resource constrained operation and normal forwarding has been restored

Date: 2017-06-01 05:37:20 UTC
L'équipement est revenu quelques min après puis est retombé.
Nous avons ouvert un ticket en urgence avec Cisco, nous sommes en cours d'investigation avec eux.

Le service est revenu à la normale pour le moment
Posted Jun 01, 2017 - 04:15 UTC
This incident affected: Infrastructure || BHS (BHS1, BHS2, BHS3, BHS4, BHS5, BHS6, BHS7).