OVHcloud Network Status

Current status
Legend
  • Operational
  • Degraded performance
  • Partial Outage
  • Major Outage
  • Under maintenance
rbx-s6-6k
Incident Report for Network & Infrastructure
Resolved
Le routeur n'est plus accessible. Nous investiguons avec un accès physique direct.

Update(s):

Date: 2015-09-17 23:48:58 UTC
Le routeur est de retour en production. Le trafic est maintenant loadbalance entre les deux routeurs et ils sont redondant.

Date: 2015-09-17 22:46:36 UTC
Le routeur est UP de nouveau, nous remettons progressivement la production sur ce routeur .


Date: 2015-09-17 21:39:07 UTC
Le routeur est isole, le trafic est pris en charge par rbx-s5-6k.
Nous allons pouvoir procéder au reload.

rbx-s6-6k-SUP2T#sh int po 5 | i rate
Queueing strategy: fifo
30 second input rate 1031000 bits/sec, 268 packets/sec
30 second output rate 41802000 bits/sec, 4556 packets/sec
rbx-s6-6k-SUP2T#sh int po 7 | i rate
Queueing strategy: fifo
30 second input rate 813000 bits/sec, 244 packets/sec
30 second output rate 33751000 bits/sec, 3620 packets/sec

Date: 2015-09-17 20:07:33 UTC
Nous démarrons l'opération. Nous isolons dans un premier temps le routeur.

Date: 2015-09-17 13:39:16 UTC
L'insertion d'une carte ne permet pas la remise en production sans impact. Nous allons effectuer une maintenance ce soir a partir de 22h: Nous allons redémarrer et mettre a jour ce routeur afin de débloquer le dysfonctionnement.

Tous le trafic sera pris en charge par rbx-s5-6k durant cette maitenance et il n'y a pas d'impact a prevoir.

Date: 2015-09-17 10:54:51 UTC
Le formatage ne passe pas. Nous inserons une seconde carte afin de synchroniser la configuration et effectuer une maintenance sans impact.

Date: 2015-09-17 09:57:10 UTC
rbx-s6-6k-SUP2T#sh proc cpu sort
CPU utilization for five seconds: 100%/1%; one minute: 99%; five minutes: 99%
PID Runtime(ms) Invoked uSecs 5Sec 1Min 5Min TTY Process
395 1819476 92764 19614 60.52% 66.87% 71.96% 0 Async write proc

La flash semble etre l'origine du problème. Nous allons la formater.
Posted Sep 17, 2015 - 09:44 UTC
This incident affected: Infrastructure || RBX (RBX2).