OVHcloud Network Status
Current status
Legend
- Operational
- Degraded performance
- Partial Outage
- Major Outage
- Under maintenance
46.105.108.0/24 & 46.105.109.0/24
Scheduled Maintenance
Report for Network & Infrastructure
Completed
Un des 2 Nexus gérant ces réseaux a perdu certains de ces FEX (Bug).
Nous allons uppgrader en ISSU le couple de Nexus dans la nuit pour éviter la panne si le problème survenait sur le second Nexus.
Pour l'instant, une partie du trafic s'écoule par le N5 secondaire.
L'intervention est programmée ce vendredi 28 Août à partir de 23h00 GMT+2
Update(s):
Date: 2015-09-03 21:45:17 UTC
dans le doute reboot....
# sh fex
FEX FEX FEX FEX Fex
Number Description State Model Serial
------------------------------------------------------------------------
100 fex100|51C09 Online N2K-C2248TP-1GE SSI14280VP3
101 FEX0101 Online N2K-C2248TP-1GE SSI14260CR3
102 fex102|51C07 Online N2K-C2248TP-1GE SSI14270LJ4
103 fex103|51C06 Online N2K-C2248TP-1GE SSI142709EX <<<<<<<
104 fex104|51C05 Online N2K-C2248TP-1GE SSI14270LRD
106 FEX0106 Online N2K-C2232PP-10GE SSI14160433
110 FEX0110 Online N2K-C2232PP-10GE SSI14260EFJ
111 FEX0111 Online N2K-C2248TP-1GE SSI14270E6V
112 FEX0112 Online N2K-C2248TP-E-1GE SSI171301VL
le fex est de retour, la conf est sync, all good
Date: 2015-09-03 21:39:13 UTC
Le deconf /reconf ne fct pas
nous rebootons electriquement le fex 103
Date: 2015-09-03 21:25:13 UTC
# sh fex
FEX FEX FEX FEX Fex
Number Description State Model Serial
------------------------------------------------------------------------
100 fex100|51C09 Online N2K-C2248TP-1GE SSI14280VP3
101 FEX0101 Online N2K-C2248TP-1GE SSI14260CR3
102 fex102|51C07 Online N2K-C2248TP-1GE SSI14270LJ4
104 fex104|51C05 Online N2K-C2248TP-1GE SSI14270LRD
106 FEX0106 Online N2K-C2232PP-10GE SSI14160433
110 FEX0110 Online N2K-C2232PP-10GE SSI14260EFJ
111 FEX0111 Online N2K-C2248TP-1GE SSI14270E6V
112 FEX0112 Online N2K-C2248TP-E-1GE SSI171301VL
--- -------- Connected N2K-C2248TP-1GE SSI142709EX <<<<<<
On a tjs le fex 103 qui est le fex fantome, malgre le port shut....
je deconf entierement le fex 103 et repush la conf
Date: 2015-09-03 21:06:01 UTC
nous rebootons le 1er n5
Date: 2015-09-03 13:43:18 UTC
Le fex 103 a disparu de l'un des 2 nexus.
# sh fex
FEX FEX FEX FEX Fex
Number Description State Model Serial
------------------------------------------------------------------------
100 fex100|51C09 Online N2K-C2248TP-1GE SSI14280VP3
101 FEX0101 Online N2K-C2248TP-1GE SSI14260CR3
102 fex102|51C07 Online N2K-C2248TP-1GE SSI14270LJ4
104 fex104|51C05 Online N2K-C2248TP-1GE SSI14270LRD
106 FEX0106 Online N2K-C2232PP-10GE SSI14160433
110 FEX0110 Online N2K-C2232PP-10GE SSI14260EFJ
111 FEX0111 Online N2K-C2248TP-1GE SSI14270E6V
112 FEX0112 Online N2K-C2248TP-E-1GE SSI171301VL
--- -------- Offline N2K-C2248TP-1GE SSI142709EX
Cela impacte uniquement la redondance, mais également la livraison de nouveau serveur dans cette baie.
Nous allons rebooter le n5 cette nuit 03/09/2015, le trafic sera alors forwardé par le 2nd n5
Date: 2015-08-28 23:22:40 UTC
Lors de la remise en route des FEX sur le primaire, ceux ci avaient perdu leur config (surement avant l'issu), causant des inconsistences dans les vpc.
Nous venons de revérifier l'ensemble des configs et tous les serveurs pinguent.
Le couple est désormais stable.
Date: 2015-08-28 22:23:21 UTC
L'ISSU sur le secondaire s'est bien passé. Nous reloadons le primaire qui est dans un état anormal (ports en inactive)
Date: 2015-08-28 21:47:10 UTC
Le switch primaire a reloadé / crashé pendant l'ISSU. Il a rebooté provoquant une petite coupure. Des FEX sont tombés pendant l'upgrade. Nous mettons à jour à chaud le secondaire pour que les FEX soient mis à jour et remontent sur le switch primaire.
Date: 2015-08-28 21:16:30 UTC
L'intervention démarre, nous venons encore de perdre un FEX.
Nous allons uppgrader en ISSU le couple de Nexus dans la nuit pour éviter la panne si le problème survenait sur le second Nexus.
Pour l'instant, une partie du trafic s'écoule par le N5 secondaire.
L'intervention est programmée ce vendredi 28 Août à partir de 23h00 GMT+2
Update(s):
Date: 2015-09-03 21:45:17 UTC
dans le doute reboot....
# sh fex
FEX FEX FEX FEX Fex
Number Description State Model Serial
------------------------------------------------------------------------
100 fex100|51C09 Online N2K-C2248TP-1GE SSI14280VP3
101 FEX0101 Online N2K-C2248TP-1GE SSI14260CR3
102 fex102|51C07 Online N2K-C2248TP-1GE SSI14270LJ4
103 fex103|51C06 Online N2K-C2248TP-1GE SSI142709EX <<<<<<<
104 fex104|51C05 Online N2K-C2248TP-1GE SSI14270LRD
106 FEX0106 Online N2K-C2232PP-10GE SSI14160433
110 FEX0110 Online N2K-C2232PP-10GE SSI14260EFJ
111 FEX0111 Online N2K-C2248TP-1GE SSI14270E6V
112 FEX0112 Online N2K-C2248TP-E-1GE SSI171301VL
le fex est de retour, la conf est sync, all good
Date: 2015-09-03 21:39:13 UTC
Le deconf /reconf ne fct pas
nous rebootons electriquement le fex 103
Date: 2015-09-03 21:25:13 UTC
# sh fex
FEX FEX FEX FEX Fex
Number Description State Model Serial
------------------------------------------------------------------------
100 fex100|51C09 Online N2K-C2248TP-1GE SSI14280VP3
101 FEX0101 Online N2K-C2248TP-1GE SSI14260CR3
102 fex102|51C07 Online N2K-C2248TP-1GE SSI14270LJ4
104 fex104|51C05 Online N2K-C2248TP-1GE SSI14270LRD
106 FEX0106 Online N2K-C2232PP-10GE SSI14160433
110 FEX0110 Online N2K-C2232PP-10GE SSI14260EFJ
111 FEX0111 Online N2K-C2248TP-1GE SSI14270E6V
112 FEX0112 Online N2K-C2248TP-E-1GE SSI171301VL
--- -------- Connected N2K-C2248TP-1GE SSI142709EX <<<<<<
On a tjs le fex 103 qui est le fex fantome, malgre le port shut....
je deconf entierement le fex 103 et repush la conf
Date: 2015-09-03 21:06:01 UTC
nous rebootons le 1er n5
Date: 2015-09-03 13:43:18 UTC
Le fex 103 a disparu de l'un des 2 nexus.
# sh fex
FEX FEX FEX FEX Fex
Number Description State Model Serial
------------------------------------------------------------------------
100 fex100|51C09 Online N2K-C2248TP-1GE SSI14280VP3
101 FEX0101 Online N2K-C2248TP-1GE SSI14260CR3
102 fex102|51C07 Online N2K-C2248TP-1GE SSI14270LJ4
104 fex104|51C05 Online N2K-C2248TP-1GE SSI14270LRD
106 FEX0106 Online N2K-C2232PP-10GE SSI14160433
110 FEX0110 Online N2K-C2232PP-10GE SSI14260EFJ
111 FEX0111 Online N2K-C2248TP-1GE SSI14270E6V
112 FEX0112 Online N2K-C2248TP-E-1GE SSI171301VL
--- -------- Offline N2K-C2248TP-1GE SSI142709EX
Cela impacte uniquement la redondance, mais également la livraison de nouveau serveur dans cette baie.
Nous allons rebooter le n5 cette nuit 03/09/2015, le trafic sera alors forwardé par le 2nd n5
Date: 2015-08-28 23:22:40 UTC
Lors de la remise en route des FEX sur le primaire, ceux ci avaient perdu leur config (surement avant l'issu), causant des inconsistences dans les vpc.
Nous venons de revérifier l'ensemble des configs et tous les serveurs pinguent.
Le couple est désormais stable.
Date: 2015-08-28 22:23:21 UTC
L'ISSU sur le secondaire s'est bien passé. Nous reloadons le primaire qui est dans un état anormal (ports en inactive)
Date: 2015-08-28 21:47:10 UTC
Le switch primaire a reloadé / crashé pendant l'ISSU. Il a rebooté provoquant une petite coupure. Des FEX sont tombés pendant l'upgrade. Nous mettons à jour à chaud le secondaire pour que les FEX soient mis à jour et remontent sur le switch primaire.
Date: 2015-08-28 21:16:30 UTC
L'intervention démarre, nous venons encore de perdre un FEX.
This scheduled maintenance affected: Infrastructure || RBX (RBX4).