OVHcloud Network Status

Current status
Legend
  • Operational
  • Degraded performance
  • Partial Outage
  • Major Outage
  • Under maintenance
rbx-g1-nc5
Incident Report for Network & Infrastructure
Resolved
Nous avons une linecard sur rbx-g1-nc5 qui a rebooté suite à un crash, cela a impacté le routage de certains blocs xDSL car cela a causé un flap OSPF/OSPFv3 :

LC/0/0/CPU0:2017 Jun 26 18:12:03.799 CEST: fia_driver[282]: %PLATFORM-CIH-5-ASIC_ERROR_HARD_RESET_START : fia[3]: HARD_RESET needed 0x26012001
LC/0/0/CPU0:2017 Jun 26 18:12:09.319 CEST: fia_driver[282]: %PLATFORM-CIH-2-ASIC_ERROR_HARD_RESET : fia[3]: A link-err error has occurred causing packet drop transient. CMIC.CMIC_CMC0_IRQ_STAT3.MMU.Interrupt_Register.DramOppCrcErrInt Threshold has been exceeded
0/RP0/ADMIN0:2017 Jun 26 18:12:09.320 CEST: shelf_mgr[3245]: %INFRA-SHELF_MGR-3-FAULT_ACTION_CARD_RELOAD : Graceful reload requested for card 0/0. Reason: Board reload on exceeding reset threshold
0/0/ADMIN0:2017 Jun 26 18:12:09.321 CEST: cm[2679]: %ROUTING-TOPO-5-PROCESS_UPDATE : Got process update: Card shutdown.


Update(s):

Date: 2017-06-29 04:39:23 UTC
Le routeur est de retour en production, nous monitorons les erreurs sur les linecards.

Date: 2017-06-29 04:30:19 UTC
Le routeur redemarre.

Date: 2017-06-29 03:02:03 UTC
Le RMA a été postponé, l'erreur semble lié à un dysfonctionnement software . Nous allons mettre a jour l'equipement avec des patchs connus pour fixer ce bug, il n'y a pas d'impact a prévoir.

Date: 2017-06-26 20:09:38 UTC
Le TAC Cisco nous remonte un nombre d'erreurs sur l'ASIC important et va procéder à un RMA de la linecard.
Posted Jun 26, 2017 - 17:07 UTC