rssLink RSS for all categories
 
icon_blue
icon_green
icon_green
icon_red
icon_red
icon_green
icon_green
icon_orange
icon_red
icon_red
icon_green
icon_green
icon_green
icon_red
icon_green
icon_red
icon_green
icon_green
icon_red
icon_red
icon_green
icon_red
icon_green
icon_green
icon_orange
icon_green
icon_orange
icon_blue
icon_green
icon_blue
icon_red
icon_green
 

FS#4418 — ldn-1-6k

Attached to Project— Reseau Internet et Baies
Incident
Entire OVH Network
CLOSED
100%
london a crashé

Queued messages:
Jul 28 07:16:40 GMT: %SYS-3-LOGGER_FLUSHING: System pausing to ensure console debugging output.

Jul 28 07:16:35 GMT: %BGP-4-MAXPFX: No. of prefix received from 195.66.225.231 (afi 0) reaches 41487, max 50000
*** System received a Bus Error exception ***
signal= 0xa, code= 0x10, context= 0x44af3384
PC = 0x41d7ccd4, SP = 0x430b0930, RA = 0x410746a8
Cause Reg = 0x00003c20, Status Reg = 0x34008002
rommon 1 >
Jul 28 07:16:49 GMT: %SYS-SP-3-LOGGER_FLUSHING: System pausing to ensure console debugging output.

Jul 28 07:16:49 GMT: %SYS-SP-3-LOGGER_FLUSHED: System was paused for 00:00:00 to ensure console debugging output.

Jul 28 07:16:49 GMT: %OIR-SP-6-CONSOLE: Changing console ownership to switch processor



*** System received a Software forced crash ***
signal= 0x17, code= 0x24, context= 0x42354774
PC = 0x402d23ac, Cause = 0x1c20, Status Reg = 0x34008002
Exit at the end of BOOT string
rommon 1 >
Date:  Wednesday, 28 July 2010, 09:07AM
Reason for closing:  Done
Comment by OVH - Wednesday, 28 July 2010, 08:38AM

Le routeur est revenu.


Comment by OVH - Wednesday, 28 July 2010, 08:41AM

Le routeur a déjà crashé il y a 4 jours:
http://travaux.ovh.com/?do=details&id=4408

Maintenant on connait l'origine du probleme.
la semaine passée nous avons augmenté les tailles de
queue sur les ports 10G "hold-queue". ceci a provoqué
le plantage de ldn-1-6k auj et il y a 4 jours puis
il y a 4 jours le plantage de fra-1-6k et ams-1-6k
+ de problemes sur les vss.


Comment by OVH - Wednesday, 28 July 2010, 09:06AM

Donc on sait maintenant que le MPLS n'y est pour rien
dans les plantages ainsi que toutes les autres hypotheses
sont fausses.

Ce probleme de plantage en cascade nous a beaucoup inquieté
et c'est soulageant de trouver l'origine du probleme.

Tous les autres problemes (le proxy-arp/bgp sur les vss)
sont déjà en cours de resolution. On pense qu'après ces
sales moments qu'on est en train de passer, on va revoir
le soleil très prochainement.