OVHcloud Network Status

Current status
Legend
  • Operational
  • Degraded performance
  • Partial Outage
  • Major Outage
  • Under maintenance
MAJ switchs réseaux dédiés - 2
Scheduled Maintenance Report for Network & Infrastructure
Completed
Cisco a identifié que les problèmes rencontrés lors de la dernière campagne d'upgrade (http://travaux.ovh.net/?do=details&id=9566) concerne en fait un certain type de hardware.
Nous allons reprendre la campagne de mise à jour pour les Nexus 5000 qui ne sont pas concernés par le bug rencontré.

En parallèle la BU de cisco travaille sur une image engineering qui corrige ce BUG.

La première série d'upgrade est programmée pour le mardi 19 novembre à partir de 23h00 (heure FR) et portera sur les réseaux suivants :
176.31.232.0/24
176.31.233.0/24
176.31.234.0/24
176.31.235.0/24
176.31.236.0/24
176.31.237.0/24
176.31.238.0/24
176.31.239.0/24
178.33.228.0/24
178.33.229.0/24
178.33.230.0/24
178.33.231.0/24
188.165.12.0/24
188.165.13.0/24
188.165.14.0/24
188.165.15.0/24
178.33.241.0/24
178.33.242.0/24
178.33.60.0/24
178.33.61.0/24
178.33.62.0/24
178.33.63.0/24
37.59.16.0/24
37.59.17.0/24
37.59.18.0/24
37.59.19.0/24

Update(s):

Date: 2013-12-10 11:55:35 UTC
Toutes les maj sur les switch de type UP sont terminées. En raison d'un bug, nous ne pouvons appliquer la maj sur les switch de type P pour le moment. Nous mettrons donc ces switchs à jour avec une prochaine release ou ce bug sera fixé.

Date: 2013-12-04 00:39:22 UTC
Les opérations de mise à jour sont terminées.

Date: 2013-12-03 23:36:39 UTC
Nous avons un probleme sur les 2 switchs des reseaux 5.39.74.0 et 5.39.75.0
l'upgrade ISSU s'est bien deroulée, mais impossible de réappliquer la QOS.

En reboottant l'un des switch, le second a freezé provoquant le down des 2 reseaux pendant qq minutes



Date: 2013-12-03 23:02:45 UTC
Nous avons une anomalie sur les réseaux 37.59.32 et 33. L'upgrade à chaud s'est correctement déroulé sur l'un des 2 switchs de la paire mais pendant la mise à jour de l'autre switch, les 2 équipements ont redémarrés. Il y aura un impact de qq minutes sur ces réseaux.

Date: 2013-12-03 22:11:50 UTC
Nous avons également une anomalie sur une autre paire de switch impactat les réseaux 37.59.24 et 25. Nous aurons un impact de 10min sur ces réseaux.

Date: 2013-12-03 22:08:21 UTC
Nous avons un incident sur les réseau 5.135.138.0/24 et 5.135.139.0/24 ou le trafic est impacté par l'upgrade qui est en cours sur l'un des switchs. Nous redémarrons le n5 secondaire.
Il y aura environ 10min de downtime sur les serveurs de ce réseau.

Date: 2013-12-03 21:55:58 UTC
Nous commencons l'intervention.

Date: 2013-12-02 15:38:40 UTC
La prochaine session d'upgrades de switchs N5 est programmée ce mardi 03/12 à partir de 23:00.

Les réseaux suivants seront concernés:

37.59.18.0/24
37.59.19.0/24
37.59.24.0/24
37.59.25.0/24
37.59.26.0/24
37.59.27./024
37.59.32.0/24
37.59.33.0/24
37.59.34.0/24
37.59.35.0/24
5.39.64.0/24
5.39.65.0/24
5.39.66.0/24
5.39.67.0/24
5.39.68.0/24
5.39.69.0/24
5.39.72.0/24
5.39.73.0/24
5.39.74.0/24
5.39.75.0/24
5.135.128.0/24
5.135.129.0/24
5.135.134.0/24
5.135.135.0/24
5.135.136.0/24
5.135.137.0/24
5.135.138.0/24
5.135.139.0/24
5.135.140.0/24
5.135.141.0/24
46.105.104.0/24
46.105.105.0/24

Il s'agit d'upgrades à chaud donc pas d'impact à anticiper a priori mais le trafic sera \"à risque\".

Date: 2013-11-20 14:14:30 UTC
L'ensemble des n5 des serveurs dédiés de BHS sont maintenant à jour.

Date: 2013-11-20 12:25:04 UTC
Nous avons eu un crash sur l'un des switchs lors de la procédure d'upgrade à chaud.
Le deuxième switch a également crashé quelque minutes plus tard.
Il y a eu un downtime d'environ 10min sur les serveurs de ce réseau. Ceci est du au fait que les fex ont du se mettre à jour à froid.

Date: 2013-11-20 11:29:37 UTC
Nous avons un incident sur le réseau 198.27.85.0/24 ou le trafic est impacté par l'upgrade qui est en cours sur l'un des switchs. Nous travaillons sur le problème.

Date: 2013-11-20 10:58:27 UTC
Nous mettons à jour à chaud les n5 de BHS.
Les réseaux suivants sont concernés par l'upgrade:

198.27.85.0/24
142.4.218.0/24
142.4.219.0/24

Date: 2013-11-20 01:05:34 UTC
Les upgrades sont terminés.

Seuls les réseaux suivants n'ont pas été migrés cette nuit. Ils seront upgradés lors d'une prochaine fenêtre.
37.59.18.0/24
37.59.19.0/24

Date: 2013-11-19 23:34:17 UTC
Nous avons eu un crash sur l'un des switchs lors de la procédure d'upgrade à chaud. Nous allons finir manuellement la procédure mais il y aura un downtime d'environ 10min sur les serveurs de ce réseau.

Date: 2013-11-19 23:12:42 UTC
Les upgrades sont en cours.

Nous avons un incident sur le réseau 188.165.14 ou le trafic est impacté par l'upgrade qui est en cours sur l'un des switchs. Nous travaillons sur le problème.

Date: 2013-11-19 21:55:25 UTC
Nous démarrons les mises à jour (à chaud) des réseaux suivants:

176.31.232.0/24
176.31.233.0/24
176.31.234.0/24
176.31.235.0/24
176.31.236.0/24
176.31.237.0/24
176.31.238.0/24
176.31.239.0/24
178.33.228.0/24
178.33.229.0/24
178.33.230.0/24
178.33.231.0/24
188.165.12.0/24
188.165.13.0/24
188.165.14.0/24
188.165.15.0/24
178.33.241.0/24
178.33.242.0/24
178.33.60.0/24
178.33.61.0/24
178.33.62.0/24
178.33.63.0/24
37.59.16.0/24
37.59.17.0/24
37.59.18.0/24
37.59.19.0/24

Date: 2013-11-19 13:29:04 UTC
Les nexus 5000 de BHS gérant ces réseaux sont maintenant à jour.

Date: 2013-11-19 10:32:15 UTC
Nous mettons à jour à chaud les n5 de BHS.
Les réseaux suivant sont concernés par l'upgrade:
142.4.216.0/24
142.4.217.0/24
192.95.32.0/24
192.95.33.0/24
192.99.16.0/24
192.99.17.0/24
Posted Nov 15, 2013 - 16:20 UTC