OVHcloud Network Status

Current status
Legend
  • Operational
  • Degraded performance
  • Partial Outage
  • Major Outage
  • Under maintenance
gra-3ab-a9
Scheduled Maintenance Report for Network & Infrastructure
Completed
Certains liens sur le routeur gra-3ab-a9 sont utilisés à 100%
de leur capacité. L’équipe network est prête pour faire la
migration vers les nouveaux routeurs 40G et 100G, mais ces
nouveaux routeurs ne sont pas encore bien gérés par le backend.
Etant donné l'urgence, on va lancer la migration quand même
car la qualité n'est pas au rendez vous. Puis le code sera
terminé pour les configurations des IP FO etc.

Update(s):

Date: 2016-09-23 15:19:03 UTC
La migration est terminée.

Date: 2016-09-23 14:27:38 UTC
Nous allons deplacer quatres nouvelles /24 vers un nouveau couple de routeur.

Date: 2016-09-22 14:35:09 UTC
La migration des derniers vlans est terminé. Le trafic devrait revenir sur chaque equipement progressivement.

Date: 2016-09-22 13:03:47 UTC
Jusqu'a présent les ranges suivantes ont pu être déplacees :


Nous allons déplacer 4 nouveaux vlans sur le nouveau couple de routeur. Il y a pour le moment 50G de trafic qui a été deplacé.

Date: 2016-09-22 11:27:58 UTC
Nous passons a la partie finale de la migration des 4 vlans.

Date: 2016-09-22 10:57:24 UTC
Les IPFO ont mis un peu plus de temps que les IP principales a converger.

Date: 2016-09-22 10:43:36 UTC
Nous allons migrer 4 nouveaux vlans sur les nouveaux couples de routeurs.

Date: 2016-09-22 10:13:02 UTC
Les derniers vlans ont été migrés.

Date: 2016-09-22 10:09:01 UTC
Le 6 eme vlan est migré, 4 serveurs ne re-arp pas correctement et n'ont pas encore pris en compte la migration.

Date: 2016-09-22 08:56:15 UTC
La migration est terminée, nous allons migrer le 6eme vlan.

Date: 2016-09-22 08:54:26 UTC
La migration du cinquieme vlan va commencer.

Date: 2016-09-22 07:51:52 UTC
Nous avons trouve une solution pour pouvoir prendre en charge jusqu'a 16 vlans sur chaque couple de nouveaux routeurs. Nous allons reprendre les migrations vlan par vlan et il n'y a normalement pas d'interruption de service (une coupure de 2-3 secondes peux se faire ressentir le temps que les machines re-arp).


Date: 2016-09-21 20:45:23 UTC
La migration ne se passe pas comme prévue. Les nouveaux
routeurs n'ont pas le bon comportement et on sature très
rapidement le CPU juste avec 4 vlan (1000 serveurs).
Normalement, le routeur doit tenir 3x plus minimum sans
aucun souci. On va donc changer la configuration pour
voir si on peut éviter de prendre le CPU et avoir le
même comportement. Si on n'arrive pas obtenir le bon
comportement, on mettra un autre type de routeur demain
dans l’après midi. Et on verra si c'est un problème
hardware ou software (le même hard et 2 constructeurs).


Date: 2016-09-21 16:18:21 UTC
Afin d'ajouter une fonctionnalité de gestion du hardware, nous allons patcher les routeurs l'un apres l'autre.

Date: 2016-09-21 15:49:18 UTC
Le troisieme vlan est migré.

Date: 2016-09-21 14:54:13 UTC
Le premier vlan est migré, les IPs reviennent progressivement

Date: 2016-09-21 14:40:01 UTC
La configuration est prete pour migrer les 7 vlans suivants, cette action va être effectuée dans les prochaines minutes.

Date: 2016-09-21 13:34:51 UTC
Une session de routage est defaillante sur l'un des routeurs. Nous le redemarrons.

Date: 2016-09-21 10:54:28 UTC
Nous allons deplacer les premierss reseaux vers les N9. Il n'y a pas de coupure théorique mais les robots ne pourront plus fonctionner pendant le temps de l'intervention.
Posted Sep 20, 2016 - 20:08 UTC