OVHcloud Network Status

Current status
Legend
  • Operational
  • Degraded performance
  • Partial Outage
  • Major Outage
  • Under maintenance
TGBT 6
Incident Report for Network & Infrastructure
Resolved
Nous avons un incident électrique sur tgbt6.

Update(s):

Date: 2013-03-06 23:55:39 UTC
Les 13 pannes restantes sur la totalité de RBX1 sont des check filesystem.
Notre équipe de nuit renforcée s'occupe de fixer les derniers problèmes.

Les switchs de la salle 17 avaient été basculés vers une autre arrivée
électrique et vont être rebasculés cette nuit. Cette intervention provoquera
une panne réseau d'environ 3 minutes sur chacun des salles salle 17 (baies 17xxx)

Date: 2013-03-06 23:19:22 UTC
Salle 17, reste encore :
- 16 ks
- 3 ns

Date: 2013-03-06 23:01:38 UTC
Salle 17, reste encore :
- 17 ks
- 6 ns


Date: 2013-03-06 22:38:16 UTC
Salle 17, reste encore :
- 29 ks
- 10 ns


Date: 2013-03-06 21:53:25 UTC
Salle 17, reste encore :
- 47 ks
- 20 ns

Date: 2013-03-06 21:21:21 UTC
Salle 17, reste encore :
- 51 ks
- 34 ns

Date: 2013-03-06 21:10:16 UTC
96 serveurs down en salle 17

Date: 2013-03-06 20:50:01 UTC
La salle 17 est UP.
Toutes nos équipes travaillent au dépannage des serveurs

193 serveurs down

Date: 2013-03-06 20:03:12 UTC
Nous rallumons la salle dans 10 minutes.

Date: 2013-03-06 19:52:17 UTC
Les travaux sur UPS 15 continuent...
Nous perdons beaucoup de temps a réinsérer les câbles dans leur borne de disjoncteur

Date: 2013-03-06 17:57:56 UTC
Salle 1 et 11 n'ont pas été impactées.
Salle 9, sont encore en panne : 37 ks, 19 ns

Salle 17 est encore down. Les travaux de remplacement du transfo prennent beaucoup plus de temps que prévu.

Date: 2013-03-06 17:00:32 UTC
Le transformateur d'isolement de l'UPS 15 (salle 17) s'est mis en défaut.
Le défaut est remonté jusqu'au disjoncteur principal du TGBT privant d'énergie les onduleurs 11 (salle 9) et 13 (salle 11 et 1).

Le défaut a été localisé et isolé puis nous avons rétabli l'alimentation des UPS 11 et 13.
L'UPS 15 (salle 17) reste encore coupé en attendant le remplacement du transformateur d'isolement.
Les travaux devrait prendre une demi heure.

Date: 2013-03-06 16:33:03 UTC
L'alimentation a été rétablie.
L'infra vrack sera de nouveau opérationnelle d'ici qq secondes.

Plus de détails sur l'origine du problème à suivre.

Date: 2013-03-06 16:25:07 UTC
Les salles 9 et 17 sont impactées ainsi que l'infra vrack.
Posted Mar 06, 2013 - 16:17 UTC