OVHcloud Network Status

Current status
Legend
  • Operational
  • Degraded performance
  • Partial Outage
  • Major Outage
  • Under maintenance
176.31.226.0/24
Incident Report for Network & Infrastructure
Resolved
Nous mettons à jour les switch:
http://travaux.ovh.net/?do=details&id=8028

sur 176.31.226.0/24 nous avons un
problème sur la A. le B a pris le
switching.
2013 Feb 10 20:49:02 sw Feb 10 20:49:02 %KERN-0-SYSTEM_MSG: Disabling IRQ #16 - kernel


Update(s):

Date: 2013-02-10 21:33:42 UTC
108 UP.


tout est UP. désolé pour cette mise à jour ratée.

Date: 2013-02-10 21:32:00 UTC
108 mise à jour terminée. en boot.

Date: 2013-02-10 21:30:10 UTC
104 UP

108 en mise à jour par le B

Date: 2013-02-10 21:28:56 UTC
104 mise à jour, en boot.

Date: 2013-02-10 21:27:30 UTC
2 FEX: 104 et 108 toujours en mise à jour software par le B

Date: 2013-02-10 21:27:10 UTC
il reste 3 FEX down. le reste est déjà UP.

Date: 2013-02-10 21:17:20 UTC
B est revenu et il prend en charge aussi
les FEX pour les mettre à jour à froid.

Date: 2013-02-10 21:14:19 UTC
Le B n'a pas reussi sa mission. On a reconnecté les
FEX sur le A qui est déjà dans sa nouvelle version.

Il est en train de mettre à jour les FEX, mais à froid.
Il faut compter 10-15 min de downtime :(

Date: 2013-02-10 21:07:47 UTC
allez on essaie:

Compatibility check is done:
Module bootable Impact Install-type Reason
------ -------- -------------- ------------ ------
1 yes non-disruptive reset
100 yes non-disruptive rolling
101 yes non-disruptive rolling
102 yes non-disruptive rolling
103 yes non-disruptive rolling
104 yes non-disruptive rolling
105 yes non-disruptive rolling
106 yes non-disruptive rolling
107 yes non-disruptive rolling
108 yes non-disruptive rolling
109 yes non-disruptive rolling
110 yes non-disruptive rolling
111 yes non-disruptive rolling
112 yes non-disruptive rolling

Date: 2013-02-10 20:52:09 UTC
bon, le A ne veut pas.

on va faire la mise à jour du B vers minuit.

Date: 2013-02-10 20:51:18 UTC
Install has failed. Return code 0x40930039 (aborting due to failed upgrade).
Please identify the cause of the failure, and try 'install all' again.


Date: 2013-02-10 20:34:59 UTC
Compatibility check is done:
Module bootable Impact Install-type Reason
------ -------- -------------- ------------ ------
1 yes non-disruptive reset
100 yes non-disruptive rolling
101 yes non-disruptive rolling
102 yes non-disruptive rolling
103 yes non-disruptive rolling
104 yes non-disruptive rolling
105 yes non-disruptive rolling
106 yes non-disruptive rolling
107 yes non-disruptive rolling
108 yes non-disruptive rolling
109 yes non-disruptive rolling
110 yes non-disruptive rolling
111 yes non-disruptive rolling
112 yes non-disruptive rolling


Date: 2013-02-10 20:32:18 UTC
tout est UP comme au début.

on recommence le processus de mise à jour.

Date: 2013-02-10 20:24:26 UTC
le A est UP.

on lui remet les FEX, il les accepte désormais (c'est la
même version du software).

Date: 2013-02-10 20:16:01 UTC
Compatibility check is done:
Module bootable Impact Install-type Reason
------ -------- -------------- ------------ ------
1 yes disruptive reset new image is incompatible

Date: 2013-02-10 20:14:29 UTC
on a coupé les 2x10G entre vss-8a et n5-a
le routage s'effectue via vss-8b et n5-b

Date: 2013-02-10 20:01:43 UTC
on va le downgrander dans la version précédente pour
reprendre le process de mise à jour depuis le début
et éviter la panne.

Date: 2013-02-10 20:01:35 UTC
le A est revenu:
Reason: Reset Requested due to Fatal System Error
System version: 5.2(1)N1(2a)
Service: ISSU failure: 0x4093003B

sw.176.31.226.248(config)# inter po 100-112
sw.176.31.226.248(config-if-range)# shutdown
Posted Feb 10, 2013 - 20:01 UTC