OVHcloud Network Status

Current status
Legend
  • Operational
  • Degraded performance
  • Partial Outage
  • Major Outage
  • Under maintenance
Routage Francfort 30 et 31/07
Scheduled Maintenance Report for Network & Infrastructure
Completed
Nous allons effectuer des travaux cette nuit et la nuit suivante sur Francfort (30 et 31 juillet) afin de déplacer nos routeurs dans une salle plus grande et disposant de plus puissance. Ceci va nous permettre de protéger au niveau optiques nos circuits 10G Roubaix <> Francfort et Strasbourg <> Francfort.

Planning des travaux:
- nuit du 30 au 31: déménagement fra-5-6k
- nuit du 31 au 01/08: déménagement fra-1-6k, voip, cdn, migration ligne optiques vers Bruxelles/Roubaix.

01/08: configuration de la protection Roubaix<>Francfort par Bruxelles et Paris.

Update(s):

Date: 2013-08-01 07:15:38 UTC
Infinera doit analyser les données qui ont été collectées sur les modules de controles du noeud pour déterminer l'origine du crash et trouver une solution au problème. Il s'agit d'analyses poussées qui seront effectuées directement en Californie et il n'y aura certainement pas de retour rapide. Nous allons donc tourner pendant un temps sur le chemin Roubaix > Paris > Francfort en attendant de pouvoir rallumer le côté Roubaix > Bruxelles > Francfort et mettre en place les protections.

Date: 2013-08-01 05:12:21 UTC
Nous avons rétabli 100% de la capacité Roubaix <> Francfort. Le trafic s'écoule pour le moment par Paris. Nous continuons de travailler avec Infinera afin de trouver une solution qui nous permettra de remonter le chemin Roubaix > Bruxelles > Francfort.
Nous n'allons plus tenter de nouvelle action qui pourrait avoir un impact sur le trafic pour le moment. On s'oriente certainement vers une nouvelle intervention la nuit prochaine.


Date: 2013-08-01 03:24:55 UTC
Nous sommes toujours en train de troubleshooter avec Infinera. Nous tournons avec 30% de la capacité normale entre Roubaix et Francfort.

Date: 2013-08-01 01:29:18 UTC
Nous sommes en cours de troubleshooting avec Infinera. Le trafic sera donc à risque.

Date: 2013-08-01 01:11:59 UTC
Le noeud a de nouveau crashé au moment de l'insertion de la DLM dans le chassis #2 et le trafic a de nouveau été impacté. Le noeud est de nouveau up et nous avons 100% de la capacité up mais uniquement sur le chemin Roubaix > TH2 > SBG > Francfort. Impossible pour l'instant de réinséer les cartes DLMs pour remonter la capacité par le chemin primaire Roubaix > Bruxelles > Francfort.
Nous travaillons sur le problème avec l'équipementier, Infinera.

Date: 2013-07-31 23:51:33 UTC
Tous les circuits sont de nouveau ups. Le noeud entier a été réinitialisé suite à l'insertion de DLMs dans les chassis. Nous allons maintenant réinsérer les DLMs une par une.

Date: 2013-07-31 23:42:24 UTC
Nous avons un incident sur le nouveau noeud Infinera. Les chassis 2 et 3 sont offlines et les circuits coupés.

Date: 2013-07-31 22:25:08 UTC
Le routeur est en place dans la nouvelle salle. Le trafic Roubaix<>Francfort s'écoule actuellement via Paris.

Date: 2013-07-31 21:10:34 UTC
Le routeur est isolé. Nous l'arretons afin de le déplacer.

Date: 2013-07-31 20:51:07 UTC
Nous commençons à isoler le routeur fra-1-6k du réseau.


Date: 2013-07-31 01:04:34 UTC
Done

Nous rétablissons le trafic sur le routeur.

Date: 2013-07-30 22:19:21 UTC
Le routeur est up. Nous reconnectons les liens.

Date: 2013-07-30 21:27:32 UTC
Le routeur est isolé. Nous l'arretons afin de le déplacer.

Date: 2013-07-30 21:06:42 UTC
Nous commençons à isoler le routeur fra-5-6k du réseau.
Posted Jul 30, 2013 - 17:54 UTC