rssLink RSS for all categories
 
icon_orange
icon_green
icon_green
icon_orange
icon_red
icon_green
icon_green
icon_red
icon_red
icon_orange
icon_green
icon_green
icon_green
icon_blue
icon_orange
icon_red
icon_blue
icon_green
icon_orange
icon_orange
icon_green
icon_orange
icon_red
icon_red
icon_orange
icon_green
icon_green
icon_green
icon_green
icon_green
icon_green
icon_green
 

FS#8191 — TGBT 6

Attached to Project— Datacenters
Incident
tous les datacenters
CLOSED
100%
Nous avons un incident électrique sur tgbt6.
Date:  Thursday, 07 March 2013, 14:38PM
Reason for closing:  Done
Comment by OVH - Wednesday, 06 March 2013, 17:25PM

Les salles 9 et 17 sont impactées ainsi que l'infra vrack.


Comment by OVH - Wednesday, 06 March 2013, 17:33PM

L'alimentation a été rétablie.
L'infra vrack sera de nouveau opérationnelle d'ici qq secondes.

Plus de détails sur l'origine du problème à suivre.


Comment by OVH - Wednesday, 06 March 2013, 18:00PM

Le transformateur d'isolement de l'UPS 15 (salle 17) s'est mis en défaut.
Le défaut est remonté jusqu'au disjoncteur principal du TGBT privant d'énergie les onduleurs 11 (salle 9) et 13 (salle 11 et 1).

Le défaut a été localisé et isolé puis nous avons rétabli l'alimentation des UPS 11 et 13.
L'UPS 15 (salle 17) reste encore coupé en attendant le remplacement du transformateur d'isolement.
Les travaux devrait prendre une demi heure.


Comment by OVH - Wednesday, 06 March 2013, 18:57PM

Salle 1 et 11 n'ont pas été impactées.
Salle 9, sont encore en panne : 37 ks, 19 ns

Salle 17 est encore down. Les travaux de remplacement du transfo prennent beaucoup plus de temps que prévu.


Comment by OVH - Wednesday, 06 March 2013, 20:52PM

Les travaux sur UPS 15 continuent...
Nous perdons beaucoup de temps a réinsérer les câbles dans leur borne de disjoncteur


Comment by OVH - Wednesday, 06 March 2013, 21:03PM

Nous rallumons la salle dans 10 minutes.


Comment by OVH - Wednesday, 06 March 2013, 21:50PM

La salle 17 est UP.
Toutes nos équipes travaillent au dépannage des serveurs

193 serveurs down


Comment by OVH - Wednesday, 06 March 2013, 22:10PM

96 serveurs down en salle 17


Comment by OVH - Wednesday, 06 March 2013, 22:21PM

Salle 17, reste encore :
- 51 ks
- 34 ns


Comment by OVH - Wednesday, 06 March 2013, 22:53PM

Salle 17, reste encore :
- 47 ks
- 20 ns


Comment by OVH - Wednesday, 06 March 2013, 23:38PM

Salle 17, reste encore :
- 29 ks
- 10 ns


Comment by OVH - Thursday, 07 March 2013, 00:01AM

Salle 17, reste encore :
- 17 ks
- 6 ns


Comment by OVH - Thursday, 07 March 2013, 00:19AM

Salle 17, reste encore :
- 16 ks
- 3 ns


Comment by OVH - Thursday, 07 March 2013, 00:55AM

Les 13 pannes restantes sur la totalité de RBX1 sont des check filesystem.
Notre équipe de nuit renforcée s'occupe de fixer les derniers problèmes.

Les switchs de la salle 17 avaient été basculés vers une autre arrivée
électrique et vont être rebasculés cette nuit. Cette intervention provoquera
une panne réseau d'environ 3 minutes sur chacun des salles salle 17 (baies 17xxx)