Get webhook notifications whenever Network & Infrastructure creates an incident, updates an incident, resolves an incident or changes a component status.
Le routeur n'est plus accessible. Nous investiguons avec un accès physique direct.
Update(s):
Date: 2015-09-17 23:48:58 UTC Le routeur est de retour en production. Le trafic est maintenant loadbalance entre les deux routeurs et ils sont redondant.
Date: 2015-09-17 22:46:36 UTC Le routeur est UP de nouveau, nous remettons progressivement la production sur ce routeur .
Date: 2015-09-17 21:39:07 UTC Le routeur est isole, le trafic est pris en charge par rbx-s5-6k.
Nous allons pouvoir procéder au reload.
rbx-s6-6k-SUP2T#sh int po 5 | i rate
Queueing strategy: fifo
30 second input rate 1031000 bits/sec, 268 packets/sec
30 second output rate 41802000 bits/sec, 4556 packets/sec
rbx-s6-6k-SUP2T#sh int po 7 | i rate
Queueing strategy: fifo
30 second input rate 813000 bits/sec, 244 packets/sec
30 second output rate 33751000 bits/sec, 3620 packets/sec
Date: 2015-09-17 20:07:33 UTC Nous démarrons l'opération. Nous isolons dans un premier temps le routeur.
Date: 2015-09-17 13:39:16 UTC L'insertion d'une carte ne permet pas la remise en production sans impact. Nous allons effectuer une maintenance ce soir a partir de 22h: Nous allons redémarrer et mettre a jour ce routeur afin de débloquer le dysfonctionnement.
Tous le trafic sera pris en charge par rbx-s5-6k durant cette maitenance et il n'y a pas d'impact a prevoir.
Date: 2015-09-17 10:54:51 UTC Le formatage ne passe pas. Nous inserons une seconde carte afin de synchroniser la configuration et effectuer une maintenance sans impact.
Date: 2015-09-17 09:57:10 UTC rbx-s6-6k-SUP2T#sh proc cpu sort
CPU utilization for five seconds: 100%/1%; one minute: 99%; five minutes: 99%
PID Runtime(ms) Invoked uSecs 5Sec 1Min 5Min TTY Process
395 1819476 92764 19614 60.52% 66.87% 71.96% 0 Async write proc
La flash semble etre l'origine du problème. Nous allons la formater.
Posted Sep 17, 2015 - 09:44 UTC
This incident affected: Infrastructure || RBX (RBX2).