Get webhook notifications whenever Network & Infrastructure creates an incident, updates an incident, resolves an incident or changes a component status.
Date: 2017-01-21 00:29:10 UTC La mise à jour du router gra-3b-6k semble avoir stabilisé la situation, nous investiguons pour faire la maj du a car celui semble difficilement accessible dans son état.
The gra-3b-6k router update seems to have stabilized the situation. We are investigating to update the A Router, we are having difficulties reaching it in its current state.
Date: 2017-01-21 00:11:53 UTC Le router gra-3b-6k est à jour. Nous passons à la mise à jour de gra-3a-6k.
Nous analysons une éventuelle corrélation avec un script de configuration par les robots du routeur.
The gra-3b-6k router is up-to-date. We're now updating the gra-3a-6k router.
We're analyzing an eventual correlation between a configuration script used by the robots on the router.
Date: 2017-01-20 23:48:15 UTC Nous avons la confirmation d'un bug software par Cisco. Nous updatons à la dernière version.
We got the confirmation that there's a bug by Cisco. We are updating at the latest version.
Date: 2017-01-20 23:24:13 UTC Nous sommes en cours d'investigation avec un ingénieur de chez Cisco pour comprendre les raisons des crash en boucle
Les routeurs tiennent quelques minutes après reload après crash avec une erreur du type :
Unexpected exception to CPU: vector 300
Cela nous fait penser à un problème hardware, mais il semble peut probable dans ce cas de figure (les 2 impactés en même temps).
Nous continuons d'investiguer avec le support P1 de chez cisco
------
We are still in contact with a Cisco Engeneer to understand the constant crashes.
The routers will only hold for a couple of minutes at a time, then reboot with errors like:
Unexpected exception to CPU: vector 300
That lead us to believe there's a hardware issue with the units, but it's unlikely since it's happening to both the unit at the same time.
We still investigating with the P1 Support from Cisco.
Date: 2017-01-20 23:05:02 UTC Les réseaux IP suivants sont joignables actuellement mais ont été impactés:
The following networks are reachable, but were impacted:
Date: 2017-01-20 22:32:22 UTC gra-3a-6k vien de rebooter, le couple est totalement down.
gra-3a-6k rebooted, both units are down.
Date: 2017-01-20 22:27:26 UTC Le routeur B reboot en loop. Nous avons un crashfile. Nous ouvrons un case chez Cisco. Nous isolons le B pour prendre les traces.
The B Router reboots in loop. We have a crashfile. We opened a case with Cisco. We isolated the B router to capture traces.
Date: 2017-01-20 22:02:58 UTC Nous avons le routeur b qui ne répond plus, nous investiguons
The B Router is unreachable, we're investigating.
Date: 2017-01-20 20:26:28 UTC Le routeur a rebooté sans généré de logs. nous allons envoyer les infos technique à Cisco.
The router rebooted without generating logs. We're going to send the technicals informations to Cisco.
Date: 2017-01-20 20:24:43 UTC Le routeur est revenu et maintenant stable.
The router is back online and stable.
Posted Jan 20, 2017 - 20:12 UTC
This incident affected: Infrastructure || GRA (GRA1, GRA2, GRA3).