rssLink RSS for all categories
 
icon_orange
icon_green
icon_green
icon_red
icon_red
icon_green
icon_green
icon_red
icon_green
icon_red
icon_green
icon_green
icon_green
icon_blue
icon_orange
icon_red
icon_green
icon_green
icon_orange
icon_red
icon_green
icon_green
icon_green
icon_orange
icon_orange
icon_green
icon_green
icon_green
icon_green
icon_green
icon_red
 

FS#29611 — p19-95-n6

Attached to Project— Reseau Internet et Baies
Incident
Paris   → P19
CLOSED
100%
Nous avons perdu l'équipement, nous sommes actuellement en train d'investiguer.
L'autre membre du couple p19-94-n6 est toujours fonctionnel. Nous revennons vers vous dès que nous avons des informations supplémentaires.

----

We have lost the equipment, we are currently investigating.
The other member of the p19-94-n6 pair is still functional. We will get back to you as soon as we have more information.
Date:  Thursday, 01 February 2018, 03:15AM
Reason for closing:  Done
Comment by OVH - Monday, 29 January 2018, 07:50AM

Nous sommes en train de rebooter le chassis.

----

We are currently rebooting the chassis.


Comment by OVH - Monday, 29 January 2018, 08:34AM

Nous avons eu un bug sur le chassis. Nous l'avons isolé physiquement et nous avons reloadé.
Nous avons récupéré le chassis et nous sommes en train de le remettre en production.

----

We had a bug on the chassis. We physically isolated him and reloaded him.
We have recovered the chassis and are now in the process of putting it back into production.


Comment by OVH - Monday, 29 January 2018, 09:17AM

Nous avons rencontré un problème lors de la reconnexion du vPC, les uplinks des fex sont passés en vpc failed.
Nous avons perdu le couple. Nous reloadons le deuxième membre, nous attendons que les fex reviennent online.

----

We encountered a problem when reconnecting the vPC, the fex uplinks went into vpc failed.
We lost the couple. We reload the second member, we wait for the fex to come back online.


Comment by OVH - Monday, 29 January 2018, 09:21AM

Le switch 94 est de nouveau joignable mais les fex vont mettre du temps à redémarrer.
Nous laissons le Le switch 95 isolé pour le moment.

----

Switch 94 is reachable again but fex will take some time to reboot.
We're leaving switch 95 isolated for now.


Comment by OVH - Monday, 29 January 2018, 09:26AM

1/4 des fexs sont redémarrés
Nous continuons.

----

1/4 of fexes are restarted
We're continuing.


Comment by OVH - Monday, 29 January 2018, 09:33AM

Plus de la moitié des fexs sont up

----

More than half of the fexes are up


Comment by OVH - Monday, 29 January 2018, 09:42AM

Tous les fexs sont remontés.

----

All fexs are up


Comment by OVH - Monday, 29 January 2018, 10:32AM

Nous sommes en train d'ugrader la capacité des uplinks sur le p19-94-n6. Nous ne remettons pas encore le p19-95-n6 en production, tant que nous n'avons le retour du constructeur sur le problème.

----

We are in the process of upgrading the uplink capacity on p19-94-n6. We are not putting the p19-95-n6 back into production until we get the feedback from the manufacturer on the problem.


Comment by OVH - Monday, 29 January 2018, 10:42AM

Le datacenter est en train de câbler les uplinks.

----

The datacenter is wiring the uplinks.


Comment by OVH - Monday, 29 January 2018, 11:05AM

Nous avons rajouté la capacité sur le chassis restant, nous monitorons.

----

We added the capacity on the remaining chassis, we monitor.


Comment by OVH - Monday, 29 January 2018, 11:26AM

Avec le nombre de tasks qui n'ont pas pu se faire pendant l'incident le report de charge nous oblige à upgrader une deuxième fois la capacité.

----

With the number of tasks that could not be done during the incident, we have to add more capacity to absorb the load effectively.


Comment by OVH - Monday, 29 January 2018, 11:45AM

Nous sommes en train de recabler des uplink car les liens saturent.

----

We are currently re-cabling new uplinks before we haven't enough capacity for the moment.


Comment by OVH - Monday, 29 January 2018, 15:45PM

La situation est actuellement stabilisée.
L'upgrade des upLink a permis d'absorber le pic de trafic lié aux tâches en retard.
Nous sommes en contact avec notre équipementier pour résoudre définitivement le problème et remettre p19-95-n6 en production sereinement.

----

The situation is now stabilized.
The capacity upgrade of the remaining uplinks allowed us to absorb the traffic peak due to delayed tasks.
We are currently working with our provider to safely put back p19-95-n6 in production.


Comment by OVH - Wednesday, 31 January 2018, 17:00PM

La remise en production du p19-95-n5 est programmée à 01:00 UTC.

--

Device will be putted back in production at 01:00 UTC


Comment by OVH - Thursday, 01 February 2018, 01:55AM

Nous débutons l'intervention. On commence par réactivé la VPC entre les 2 nexus et s'assurer que la négociation vPC est OK. Par la suite, on rallume les uplinks et finalement nous allons allumer fex par fex. Il y en a 46 fex total à rallumer.

--

We will begin the intervention. We start by activate the vPC between the 2 nexus and verify that the negociation is fine. After we will reup the uplinks and finally the FEX, FEX by FEX. There's a total of 46 fex to re-up.


Comment by OVH - Thursday, 01 February 2018, 02:07AM

La vPC est monté entre les 2 switches. Nous allons rallumer les uplinks.

--

The vPC is up between the 2 switches. We will re-up the uplinks.


Comment by OVH - Thursday, 01 February 2018, 02:23AM

2x10G d'uplinks est up entre p19-95-n6 <> p19-53/54-n5 et le traffic s'ecoule. Nous allons ajouter 2x10G en prévention pour la capacité.

Nous allons rallumer le FEX 100.

--

2x10G of uplinks is now up between p19-95-n6 <> p19-53/54-n5 and the traffic flow. We will add 2x10G to avoid any capacity issue.

We will reup FEX100.


Comment by OVH - Thursday, 01 February 2018, 02:30AM

FEX 100 est en ligne. Nous surveillons là situation.

--

FEX100 is online, we monitor the situation.


Comment by OVH - Thursday, 01 February 2018, 02:58AM

32 FEX up sur 43

--

32 FEX UP on 43


Comment by OVH - Thursday, 01 February 2018, 03:11AM

Tous les FEX sont UP. Nous surveillons la situation

--

All fex are up, we monitor the situation.


Comment by OVH - Thursday, 01 February 2018, 03:14AM

La maintenance est terminé.

--

The maintenance is now done.