rssLink RSS for all categories
 
icon_blue
icon_green
icon_green
icon_orange
icon_red
icon_green
icon_green
icon_orange
icon_red
icon_red
icon_green
icon_green
icon_green
icon_orange
icon_green
icon_red
icon_green
icon_green
icon_red
icon_green
icon_green
icon_red
icon_green
icon_blue
icon_orange
icon_green
icon_green
icon_blue
icon_green
icon_blue
icon_red
icon_green
 

FS#8422 — 178.33.62/24

Attached to Project— Reseau Internet et Baies
Maintenance
Paris
CLOSED
100%
Actuellement ce réseau utilise des Nexus 5010. Nous allons les changer pour mettre en place des switchs plus performant, des Nexus 5548.
Date:  Monday, 15 April 2013, 09:52AM
Reason for closing:  Done
Comment by OVH - Thursday, 11 April 2013, 03:18AM

Effectue


Comment by OVH - Thursday, 11 April 2013, 12:29PM

Suite a la mise a jour, nous avons des problèmes d'ipmi.

Nous investiguons.


Comment by OVH - Thursday, 11 April 2013, 20:15PM

Nous avons également des problèmes de netboot pour les clients vracks.

Après concertation avec Cisco, nous allons upgrader le software sur cette paire.


Comment by OVH - Thursday, 11 April 2013, 20:28PM

L'ensemble des FEX est passé offline:

100 FEX0100 Offline Sequence N2K-C2232PP-10GE SSI15420EDH
101 FEX0101 Offline N2K-C2232PP-10GE SSI15410357
102 FEX0102 Offline N2K-C2232PP-10GE SSI15410358
103 FEX0103 Offline Sequence N2K-C2232PP-10GE SSI15420EHQ
104 FEX0104 Offline N2K-C2232PP-10GE SSI15500JLL
105 FEX0105 Offline N2K-C2232PP-10GE SSI15460ARY
106 FEX0106 Offline Sequence N2K-C2232PP-10GE SSI15460AXP
107 FEX0107 Offline N2K-C2232PP-10GE SSI160700NJ
111 FEX0111 Offline N2K-C2248TP-1GE SSI154706RN


Comment by OVH - Thursday, 11 April 2013, 20:37PM

L'upgrade ISSU s'est mal déroulée et le trafic vers les serveurs a été impacté.

sw-n5-62.249# sh install all failure-reason
Install has failed. Return code 0x40930039 (aborting due to failed upgrade)

L'infra est maintenant up mais dans un état dégradée.


Comment by OVH - Thursday, 11 April 2013, 21:14PM

L'upgrade a chaud s'étant mal passé, nous sommes un état ou l'un des switch est upgradé et l'autre non. Les FEX et le switch primary continuent de tourner l'ancienne release.

Si l'upgrade à chaud échoue de nouveau sur le 2ème switch, il y a un risque de downtime plus long car les images de la nouvelle release devront être downloadées par le switch sur tous les FEX. Nous allons donc repousser la suite de l'upgrade à plus tard dans la soirée afin de limiter l'impact client.

Nous programmons la suite de l'intervention à 23h00.


Comment by OVH - Thursday, 11 April 2013, 23:30PM

Nous reprenons l'upgrade de la plate-forme.


Comment by OVH - Thursday, 11 April 2013, 23:33PM

Nous allons redémarrer le 2ème switch afin de continuer la mise à jour. Le trafic vers le réseau 178.33.62 sera impacté pendant qq minutes.


Comment by OVH - Friday, 12 April 2013, 00:08AM

L'upgrade est terminée mais n'a pas permis de fixer les problèmes sur le vlan ipmi et le netboot des vracks.

Au niveau de l'IPMI, nous avons mis en place un workaround et nous sommes dans le fonctionnement normal.
Les problèmes de netboot pour les clients vracks subsistent pour le moment. Nous continuer les investigations avec les ingénieurs de chez Cisco.