rssLink RSS for all categories
 
icon_green
icon_red
icon_orange
icon_blue
icon_red
icon_green
icon_green
icon_orange
icon_red
icon_red
icon_green
icon_green
icon_green
icon_green
icon_red
icon_blue
icon_green
icon_red
icon_orange
icon_green
icon_red
icon_green
icon_green
icon_red
icon_orange
icon_green
icon_red
icon_blue
icon_green
icon_orange
 

FS#5840 — pcc-22 et pcc-25

Attached to Project— Dedicated Cloud
Incident
Backend / Core
CLOSED
100%
Nous venons de detecter 2 switch down.
Nous intervenons.
Date:  Thursday, 29 September 2011, 14:24PM
Reason for closing:  Done
Comment by OVH - Thursday, 29 September 2011, 12:22PM

pcc-25 est revenu.

pcc-22 n'a pas planté completement mais partiellement
et donc il n'a pas coupé les ports de hosts. nus avons
coupé les port de pcc-22 à la main et le traffic a été
repris par le pcc-23 sur l'autre carte réseau des hosts.


Comment by OVH - Thursday, 29 September 2011, 12:27PM

pcc-22 a une version stable de NX-OS mais pour
contourner un bug qui bouffe le CPU du N5 nous
avons activé le spantree.

Depuis nous avons reçu une version alpha de NX-OS
que nous utilisons sur tous les autres pcc-XX-n5
et qui permet de proteger le CPU dans une certaine
mesure. en attandant la beta la semaine prochaine.

nous allons mettre la version alpha sur pcc-22


Comment by OVH - Thursday, 29 September 2011, 14:23PM

nous avons trouvé l'origine du probleme dû à une
erreur humaine et un bug: un technicien a pris
une IP déjà en production pcc-25 pour un autre
équipement. dû l'alerte sur le pcc-25. qui n'a
pas planté et n'a pas degradé le service. le
technicien a aussi pris l'IP du pcc-22 et là
le switch n'a pas aimé et a planté le switching
(!!)

il a été mis à jour avec la version
n5000-uk9.5.1.3.N1.0.254.bin
on a viré le spantree. on protege le CPU contre
les packets BPDU qu'on a sur le reseau et qui
sont traités en software.


Comment by OVH - Thursday, 29 September 2011, 14:24PM

pcc-22-n5(config-if-range)# sh proc cpu sort

PID Runtime(ms) Invoked uSecs 1Sec Process
----- ----------- -------- ----- ------ -----------
3206 211 139 1519 20.9% netstack

20%-30% pour le traitement software.