OVHcloud Network Status

Current status
Legend
  • Operational
  • Degraded performance
  • Partial Outage
  • Major Outage
  • Under maintenance
ams-1-n7
Incident Report for Network & Infrastructure
Resolved
La linecard 5, malgré 2 changements cette semaine, continue de poser problème.

Nous sommes en contact avec Cisco pour analyse de la situation et décider des suite à donner (reboot du chassis ou remplacement)

Update(s):

Date: 2016-06-26 20:39:13 UTC
Après un reseat hardware de la carte par la technicien sur place, le problème n'était pas fixé.

Néanmoins, nous avons tenté un switchover de la RSP-1 vers le RSP-0 et la magie a opéré, la linecard est revenue à la vie.

2016 Jun 26 22:16:48.487 ams-1-n7 %PLATFORM-2-MOD_DETECT: Module 5 detected (Serial number JAEXXXXXX) Module-Type 100 Gbps Ethernet Module Model N77-F312CK-26
2016 Jun 26 22:16:48.536 ams-1-n7 %PLATFORM-2-MOD_PWRUP: Module 5 powered up (Serial number JAEXXXXXX)
2016 Jun 26 22:16:48.536 ams-1-n7 %PLATFORM-5-MOD_STATUS: Module 5 current-status is MOD_STATUS_POWERED_UP

2016 Jun 26 22:20:34.921 ams-1-n7 %PLATFORM-5-MOD_STATUS: Module 5 current-status is MOD_STATUS_ONLINE/OK
2016 Jun 26 22:20:34.926 ams-1-n7 %MODULE-5-MOD_OK: Module 5 is online (Serial number: JAEXXXXXX)

ams-1-n7# sh mod
Mod Ports Module-Type Model Status
--- ----- ----------------------------------- ------------------ ----------
1 48 1/10 Gbps Ethernet Module N77-F348XP-23 ok
2 48 1/10 Gbps Ethernet Module N77-F348XP-23 ok
3 0 Supervisor Module-2 N77-SUP2E active *
4 0 Supervisor Module-2 N77-SUP2E ha-standby
5 12 100 Gbps Ethernet Module N77-F312CK-26 ok
6 12 100 Gbps Ethernet Module N77-F312CK-26 ok

Nous contrôlons mais il y a plusieurs possibilités que nous allons analyser en détail dès demain avec Cisco :

Le chassis n'est pas en forme (xbar défaillante)
Des problèmes de liaison entre une ou plusieurs fabrics
La RSP-1 est HS

Nous avons désormais de nouveau tous les 100G up.

Date: 2016-06-26 15:26:07 UTC
Cisco nous déconseille de reloader le chassis qui est potentiellement impacté par un soucis plus important sur la cross bar.

Nous surveillons pour éviter de saturer en attendant qu'un technicien sur site soit disponible pour retirer / réinserer et la carte et vérifier si cela fixe.

Date: 2016-06-26 14:02:38 UTC
Nous avons isolé le routeur d'AMSIX.
Posted Jun 26, 2016 - 13:58 UTC