OVHcloud Network Status
Current status
Legend
- Operational
- Degraded performance
- Partial Outage
- Major Outage
- Under maintenance
bhs-3a/b-a9
Incident
Report for Network & Infrastructure
Resolved
Nous constatons d'importantes dégradations de performances sur certains ranges routés par ce couple.
Nous investiguons.
Update(s):
Date: 2015-11-25 14:30:53 UTC
le trafic est de nouveau équilibré entre les 2 routeurs
Date: 2015-11-25 13:57:26 UTC
all done, on remet en route le trafic sur le bhs-3a-a9
Date: 2015-11-25 13:30:35 UTC
maj des FPD sur les PM en cours
tarting the upgrade/download of following FPDs:
=========== ==== ======= ======= =========== =========
Current Upg/Dng
Location Type Subtype Upg/Dng Version Version
=========== ==== ======= ======= =========== =========
0/PM0/0/SP pm fpga11 upg 6.03 6.04
pm fpga12 upg 6.01 6.02
pm fpga13 upg 6.01 6.02
------------------------------------------------------
Date: 2015-11-25 13:28:53 UTC
RP/0/RSP0/CPU0:bhs-3a-a9#admin install commit
Wed Nov 25 14:28:24.557 CET
Install operation 16 '(admin) install commit' started by user 'nico' via CLI at 14:28:24 CET Wed Nov 25 2015.
Install operation 16 completed successfully at 14:28:28 CET Wed Nov 25 2015.
RP/0/RSP0/CPU0:bhs-3a-a9#
on check les FPD maintenant
Date: 2015-11-25 13:23:33 UTC
Le routeur vient de finir son reload
Date: 2015-11-25 12:49:19 UTC
le routeur est isole on lance l'install
Date: 2015-11-25 12:24:43 UTC
done pour le bhs-3b-a9
On isole le bhs-3a-a9
Date: 2015-11-25 11:57:00 UTC
le routeur est good, nous remettons le trafic dessus.
Date: 2015-11-25 11:23:45 UTC
Il reste 3 PM a upgrader manuellement
--------------------------------------------------------------------------------
0/PM0/0/SP PWR-3KW-AC-V2 1.0 pm fpga11 13 6.04^ No
pm fpga12 13 6.02^ No
pm fpga13 13 6.02^ No
--------------------------------------------------------------------------------
0/PM0/1/SP PWR-3KW-AC-V2 1.0 pm fpga11 14 6.03^ Yes
pm fpga12 14 6.01^ Yes
pm fpga13 14 6.01^ Yes
--------------------------------------------------------------------------------
0/PM0/2/SP PWR-3KW-AC-V2 1.0 pm fpga11 15 6.03^ Yes
pm fpga12 15 6.01^ Yes
pm fpga13 15 6.01^ Yes
--------------------------------------------------------------------------------
0/PM0/3/SP PWR-3KW-AC-V2 1.0 pm fpga11 16 6.03^ Yes
pm fpga12 16 6.01^ Yes
pm fpga13 16 6.01^ Yes
Date: 2015-11-25 10:50:27 UTC
install good et les SMU aussi:
RP/0/RSP0/CPU0:bhs-3b-a9#admin show install committed summary
Wed Nov 25 11:46:47.646 CET
Default Profile:
SDRs:
Owner
Committed Packages:
disk0:asr9k-px-5.3.2.CSCuw18466-1.0.0
disk0:asr9k-fpd-px-5.3.2
disk0:asr9k-k9sec-px-5.3.2
disk0:asr9k-mini-px-5.3.2
disk0:asr9k-mpls-px-5.3.2
disk0:asr9k-mgbl-px-5.3.2
disk0:asr9k-px-5.3.2.CSCuv87607-1.0.0
disk0:asr9k-px-5.3.2.CSCuw01521-1.0.0
disk0:asr9k-px-5.3.2.CSCuw39764-1.0.0
reste qq fpd des PWS a mettre a jour
#admin show hw-module fpd location all
[snip]
--------------------------------------------------------------------------------
0/PM0/0/SP PWR-3KW-AC-V2 1.0 pm fpga11 13 6.03^ Yes
pm fpga12 13 6.01^ Yes
pm fpga13 13 6.01^ Yes
--------------------------------------------------------------------------------
0/PM0/1/SP PWR-3KW-AC-V2 1.0 pm fpga11 14 6.03^ Yes
pm fpga12 14 6.01^ Yes
pm fpga13 14 6.01^ Yes
--------------------------------------------------------------------------------
0/PM0/2/SP PWR-3KW-AC-V2 1.0 pm fpga11 15 6.03^ Yes
pm fpga12 15 6.01^ Yes
pm fpga13 15 6.01^ Yes
--------------------------------------------------------------------------------
0/PM0/3/SP PWR-3KW-AC-V2 1.0 pm fpga11 16 6.03^ Yes
pm fpga12 16 6.01^ Yes
pm fpga13 16 6.01^ Yes
--------------------------------------------------------------------------------
[snip]
Date: 2015-11-25 10:29:59 UTC
Install operation 13 completed successfully at 11:26:22 CET Wed Nov 25 2015.
Le chassis reboote, il reste certain fpd et l'application des SMU
Date: 2015-11-25 10:06:34 UTC
Le routeur est isolé
nous lançons l'upgrade sur bhs-3b-a9
Date: 2015-11-25 09:17:20 UTC
Nous isolons le bhs-3b-a9
Date: 2015-11-25 09:09:42 UTC
Durant la maintenance, l'ensemble des opérations de routage sera stoppée et mise en attente.
Cela concerne les ajouts et suppressions de blocs et d'ip failover, les suspensions et réouvertures de serveurs, les déplacements d'IP et de blocs ainsi que les créations et supressions de MAC virtuelles.
Date: 2015-11-24 18:33:09 UTC
Nous avons rétabli le service avec un fix temporaire.
Afin de régler définitivement les dysfonctionnements constatés, nous mettons à jour ce couple en urgence le 25 novembre à 10h CEST (4am heure BHS).
Nous investiguons.
Update(s):
Date: 2015-11-25 14:30:53 UTC
le trafic est de nouveau équilibré entre les 2 routeurs
Date: 2015-11-25 13:57:26 UTC
all done, on remet en route le trafic sur le bhs-3a-a9
Date: 2015-11-25 13:30:35 UTC
maj des FPD sur les PM en cours
tarting the upgrade/download of following FPDs:
=========== ==== ======= ======= =========== =========
Current Upg/Dng
Location Type Subtype Upg/Dng Version Version
=========== ==== ======= ======= =========== =========
0/PM0/0/SP pm fpga11 upg 6.03 6.04
pm fpga12 upg 6.01 6.02
pm fpga13 upg 6.01 6.02
------------------------------------------------------
Date: 2015-11-25 13:28:53 UTC
RP/0/RSP0/CPU0:bhs-3a-a9#admin install commit
Wed Nov 25 14:28:24.557 CET
Install operation 16 '(admin) install commit' started by user 'nico' via CLI at 14:28:24 CET Wed Nov 25 2015.
Install operation 16 completed successfully at 14:28:28 CET Wed Nov 25 2015.
RP/0/RSP0/CPU0:bhs-3a-a9#
on check les FPD maintenant
Date: 2015-11-25 13:23:33 UTC
Le routeur vient de finir son reload
Date: 2015-11-25 12:49:19 UTC
le routeur est isole on lance l'install
Date: 2015-11-25 12:24:43 UTC
done pour le bhs-3b-a9
On isole le bhs-3a-a9
Date: 2015-11-25 11:57:00 UTC
le routeur est good, nous remettons le trafic dessus.
Date: 2015-11-25 11:23:45 UTC
Il reste 3 PM a upgrader manuellement
--------------------------------------------------------------------------------
0/PM0/0/SP PWR-3KW-AC-V2 1.0 pm fpga11 13 6.04^ No
pm fpga12 13 6.02^ No
pm fpga13 13 6.02^ No
--------------------------------------------------------------------------------
0/PM0/1/SP PWR-3KW-AC-V2 1.0 pm fpga11 14 6.03^ Yes
pm fpga12 14 6.01^ Yes
pm fpga13 14 6.01^ Yes
--------------------------------------------------------------------------------
0/PM0/2/SP PWR-3KW-AC-V2 1.0 pm fpga11 15 6.03^ Yes
pm fpga12 15 6.01^ Yes
pm fpga13 15 6.01^ Yes
--------------------------------------------------------------------------------
0/PM0/3/SP PWR-3KW-AC-V2 1.0 pm fpga11 16 6.03^ Yes
pm fpga12 16 6.01^ Yes
pm fpga13 16 6.01^ Yes
Date: 2015-11-25 10:50:27 UTC
install good et les SMU aussi:
RP/0/RSP0/CPU0:bhs-3b-a9#admin show install committed summary
Wed Nov 25 11:46:47.646 CET
Default Profile:
SDRs:
Owner
Committed Packages:
disk0:asr9k-px-5.3.2.CSCuw18466-1.0.0
disk0:asr9k-fpd-px-5.3.2
disk0:asr9k-k9sec-px-5.3.2
disk0:asr9k-mini-px-5.3.2
disk0:asr9k-mpls-px-5.3.2
disk0:asr9k-mgbl-px-5.3.2
disk0:asr9k-px-5.3.2.CSCuv87607-1.0.0
disk0:asr9k-px-5.3.2.CSCuw01521-1.0.0
disk0:asr9k-px-5.3.2.CSCuw39764-1.0.0
reste qq fpd des PWS a mettre a jour
#admin show hw-module fpd location all
[snip]
--------------------------------------------------------------------------------
0/PM0/0/SP PWR-3KW-AC-V2 1.0 pm fpga11 13 6.03^ Yes
pm fpga12 13 6.01^ Yes
pm fpga13 13 6.01^ Yes
--------------------------------------------------------------------------------
0/PM0/1/SP PWR-3KW-AC-V2 1.0 pm fpga11 14 6.03^ Yes
pm fpga12 14 6.01^ Yes
pm fpga13 14 6.01^ Yes
--------------------------------------------------------------------------------
0/PM0/2/SP PWR-3KW-AC-V2 1.0 pm fpga11 15 6.03^ Yes
pm fpga12 15 6.01^ Yes
pm fpga13 15 6.01^ Yes
--------------------------------------------------------------------------------
0/PM0/3/SP PWR-3KW-AC-V2 1.0 pm fpga11 16 6.03^ Yes
pm fpga12 16 6.01^ Yes
pm fpga13 16 6.01^ Yes
--------------------------------------------------------------------------------
[snip]
Date: 2015-11-25 10:29:59 UTC
Install operation 13 completed successfully at 11:26:22 CET Wed Nov 25 2015.
Le chassis reboote, il reste certain fpd et l'application des SMU
Date: 2015-11-25 10:06:34 UTC
Le routeur est isolé
nous lançons l'upgrade sur bhs-3b-a9
Date: 2015-11-25 09:17:20 UTC
Nous isolons le bhs-3b-a9
Date: 2015-11-25 09:09:42 UTC
Durant la maintenance, l'ensemble des opérations de routage sera stoppée et mise en attente.
Cela concerne les ajouts et suppressions de blocs et d'ip failover, les suspensions et réouvertures de serveurs, les déplacements d'IP et de blocs ainsi que les créations et supressions de MAC virtuelles.
Date: 2015-11-24 18:33:09 UTC
Nous avons rétabli le service avec un fix temporaire.
Afin de régler définitivement les dysfonctionnements constatés, nous mettons à jour ce couple en urgence le 25 novembre à 10h CEST (4am heure BHS).
This incident affected: Infrastructure || BHS (BHS2).