OVHcloud Network Status

Current status
Legend
  • Operational
  • Degraded performance
  • Partial Outage
  • Major Outage
  • Under maintenance
Migration ACE20 vers ACE30
Scheduled Maintenance Report for Network & Infrastructure
Completed
UPDATE : nous attendons des informations pour reprogrammer l'intervention
--------------------------------

Suite aux incidents sur le premier couple d'ACE (model ACE20), nous allons migrer tous les contextes vers un couple d'ACE de nouvelle génération (ACE30).
L'opération sera transparente pour les contextes redondants (99% des cas).


*** Détails de l'opération ***
1. basculement de tous les contextes sur l'ACE-1 de rbx-s1
2. sauvegarde complète de l'ACE-1 de rbx-s2
2. isolation de l'ACE-1 de rbx-s2
3. démarrage de la nouvelle ACE (ACE-3) dans rbx-s2 avec la sauvegarde de l'ACE-1
4. basculement progressif des contextes de l'ACE-1 de rbx-s1 vers l'ACE-3 de rbx-s2
5. sauvegarde de l'ACE-1 de rbx-s1
6. isolation de l'ACE-1
7. démarrage de la nouvelle ACE-3
8. répartition des contextes sur les 2 nouvelles ACE30


Update(s):

Date: 2012-05-19 22:48:52 UTC
C'est up.

Un point important pour la configuration des sondes sur les nouvelles cartes ACE 30, vous devez impérativement ajouter le port dans les probe :

rbx-s2-ace3/vrack2XXX# conf t
Enter configuration commands, one per line. End with CNTL/Z.
rbx-s2-ace3/vrack2XXX(config)# probe http HTTP_PROBE
rbx-s2-ace3/vrack2XXX(config-probe-http)# port 80


Date: 2012-05-19 22:47:32 UTC
On met en place la 2ème ACE30. C'est fait. On attend.


Date: 2012-05-19 22:39:02 UTC
On a redemarré les 2 nouvelles ACE30. Tout va bien.
Quelques verifications de base. Pas de probleme.

On coupe les 2 anciennes ACE20. On attend 5 secondes.
Tiens c'est pas coupé. Okye, la conf s1 et s2 n'est
pas pareil. Maintenant c'est coupé.

On met en route la ACE30 sur s1. Ca ping. Les sites
sont toujours en panne, il faut laisser le temps
aux MAC se de mettre à jour. On attend. Les sites
sont up.

Date: 2012-05-19 20:30:15 UTC
Nous avons remis les contextes sur les ACE d'origine dans leur configuration d'origine.
Etude en cours auprès de Cisco.

Date: 2012-05-19 19:54:14 UTC
L'ACE30 ne veut pas démarrer !

%ACE-2-199008: DC controller:Itasca reads from mailbox fifo when empty
%ACE-2-199008: DC controller:Itasca reads from mailbox fifo when empty
%ACE-2-199008: DC controller:Itasca reads from mailbox fifo when empty
%ACE-2-199008: DC controller:Itasca reads from mailbox fifo when empty
%ACE-1-727008: HA: Failed to send heartbeats to peer. Internal error: Failed to communicate to IXP
%ACE-2-199006: Orderly reload started at Sat May 19 21:52:26 2012 by System. Reload reason: NP 3 Failed : NP ME Hung



Date: 2012-05-19 17:47:46 UTC
Sauvegarde en cours de ACE-1 de rbx-s1 puis démarrage de la nouvelle ACE30 (ACE-3)

Date: 2012-05-19 16:33:09 UTC
Suite à des perturbations cet après midi,nous allons effectuer la migration ce jour.
Actuellement tous les contextes ont été basculés vers rbx-s2.

Date: 2012-05-18 15:10:58 UTC
Nous avons vérifié les contextes incompatibles un par un.
Il n'y a plus d'obstacle à la migration qui est planifiée le lundi 21 mai à partir de 23h.

Date: 2012-05-14 22:32:39 UTC
Tout a été remis dans la configuration d'origine.
On va corriger les contextes avec une configuration incompatible puis reprogrammer la maintenance.

Date: 2012-05-14 22:18:06 UTC
Il y a de nombreux contextes avec une configuration non compatible avec la version du software sur l'ACE30.
Nous faisons marche arrière (retour sur l'ACE20) le temps de corriger les configurations non valides.

*** DETAILS ***
Dans les versions précédentes, dans une 'class map', il était possible d'associer une commande 'match any' avec d'autres types de commandes 'match'.
Dans la version actuelle (dernière version majeure), cela n'est plus possible (les critères de 'match' seront ignorés).





Date: 2012-05-14 21:39:12 UTC
La carte ACE-1 de rbx-s1 est isolée. Nous démarrons l'ACE30 avec la bonne configuration.

Date: 2012-05-14 21:11:07 UTC
Les contextes sont tous sur rbx-s1.

Date: 2012-05-14 20:59:58 UTC
C'est parti !
Posted May 14, 2012 - 15:06 UTC