OVHcloud Bare Metal Cloud Status

Current status
Legend
  • Operational
  • Degraded performance
  • Partial Outage
  • Major Outage
  • Under maintenance
Baies 01xxx
Incident Report for Bare Metal Cloud
Resolved
Les baies 01C03 01C02 01B05 01B06 ont disjoncté. Nos équipes interviennent.

Update(s):

Date: 2008-07-23 22:09:25 UTC
tout est up.

Date: 2008-07-23 21:58:19 UTC
Encore 2 ... on a changé beaucoup de carte mere et de RAM.
Il se peut que les RAM soient correctement detectées dans
certains sevreurs. Il faut nous ouvrir un ticket d'incident
puis nous allons intervenir asap.

Date: 2008-07-23 19:51:54 UTC
Il nous reste encore 5-6 serveurs avec les cas plus difficile
(le Windows avec le changement de la carte mere et donc nouvelle
MAC).

Date: 2008-07-23 15:36:30 UTC
Le probleme concerne la baie 01C02/01C03/01C04/01C05/01C06.

Il reste 59 serveurs HG en panne.

Une erreur humaine est à l'origine du probleme. Des travaux d'ajout
de nouvelles clims sont en cours dans la salle 1. Apparament l'un
de nouveau circuit de refroidissement d'une nouvelle clim a été
alimentée alors qu'il n'a pas été fini !? Et le liquide de refroidissement
a apergé 4 baies HG à certains endroits.

Nous avons dû sortir les serveurs de baies et nous sommes en train
de les verifier un par un. Puis changer les pieces en cas de probleme.

Il faut compter entre 10 minutes à 8 heures pour le retablissement
complet de tous les serveurs. Toutes nos équipes sont en alerte et
aident dans le datacentre, mais le debugage de certains serveurs est
long.

On retablit la situation puis on va chercher l'origine de probleme.

Les clients HG ont un SLA de 99.99%. Au delà, le SLA s'applique.

En cas de probleme, oles@ovh.net, geg@ovh.net, totoro@ovh.net

Date: 2008-07-23 13:22:37 UTC
01C04 01C05 01C07 sont également impactés
Posted Jul 23, 2008 - 13:02 UTC
This incident affected: Dedicated Servers || Global Infrastructure (BHS, ERI, GRA, LIM, RBX, SBG, SGP, SYD, WAW).