OVHcloud Bare Metal Cloud Status

Current status
Legend
  • Operational
  • Degraded performance
  • Partial Outage
  • Major Outage
  • Under maintenance
vrack1.5
Incident Report for Bare Metal Cloud
Resolved
Nous avons un probleme de vRack entre RBX et les
3 autres datacenters: SBG, GRA et BHS. Nous cherchons
l'origine du probleme.

Les clients impactés ont le vRack entre les DC. Le
probleme a commencé vers 10h15.

Update(s):

Date: 2014-11-22 16:45:16 UTC
Suite au premier restart du process udp, tout est rentré dans l'ordre. Nous avons ensuite chercher le flux réseau déclenchant ce problème. Après 2h, le process UDP était déjà revenu à 50% de son utilisation mémoire max mais en décortiquant les paquets remontant au cpu, nous avons pu identifier le flux précis posant problème. Nous avons donc pu ajouter le filtrage nécessaire pour éviter que ce flux remonte jusqu'au cpu du routeur et fixer définitivement le pb.

Date: 2014-11-22 14:41:06 UTC
Le probleme semble fixé. On verifie.

Date: 2014-11-22 14:33:47 UTC
#run attach 0/RSP0/CPU0
sysmgr_control -A -r udp

pour relancer le process.



Date: 2014-11-22 14:23:31 UTC
Il est possible qu'on ait le bug CSCug87873. Il existe
un patch. On regarde les conditions d'application du
patch (reload ou pas de reload)

Date: 2014-11-22 13:37:31 UTC
on etudie les tacacs des changements de la configuration
depuis cette nuit pour trouver l'origine du probleme. le
TAC de Cisco est sur le probleme aussi.

Date: 2014-11-22 13:29:16 UTC
Nous travailons avec le constructeur des equipements
pour trouver l'origine du probleme. Le vRack à l'interieur
du RBX continue à fonctionner. Le vRack dans les autres
DC continue à fonctionner et entre les DC. Le probleme
se situe sur les equipemenets à Roubaix qui se sont
isolés du reseau vRack, tout en continuant à fonctionner
normalement sur l'IPv4/IPv6. On cherche l'origine du
probleme.
Posted Nov 22, 2014 - 11:11 UTC
This incident affected: Dedicated Servers || Additional services (BHS, ERI, GRA, LIM, RBX, SBG, SGP, SYD, WAW).