OVHcloud Web Hosting Status

Current status
Legend
  • Operational
  • Degraded performance
  • Partial Outage
  • Major Outage
  • Under maintenance
filerz80
Incident Report for Web Cloud
Resolved
Nous augmentons la capacité en lecture du filer afin de palier
aux surcharges. Techniquement paralant nous ajoutons les disques
en parallele dans les raid-1 afin d'avoir plus de capacité de
lecture sur ce filer.

Nous avons suspendu le filer dans le cluster afin d'accelerer
la syncronisation de données sur les nouveaux disques et d'avoir
toute la capacité de lecture disponible au plus vite.

On prevoit le retour à la normal avant midi.

Update(s):

Date: 2009-07-01 21:16:55 UTC
scrub: resilver completed with 0 errors on Wed Jul 1 23:16:07 2009

fini.

la distribution des emails en retard est en cours.

Date: 2009-07-01 21:14:41 UTC
scrub: resilver in progress, 99.56% done, 0h5m to go


Date: 2009-07-01 20:58:50 UTC
scrub: resilver in progress, 98.38% done, 0h19m to go


Date: 2009-07-01 20:19:52 UTC
scrub: resilver in progress, 97.58% done, 0h28m to go


Date: 2009-07-01 19:34:31 UTC
scrub: resilver in progress, 95.66% done, 0h50m to go


Date: 2009-07-01 18:27:54 UTC
scrub: resilver in progress, 93.41% done, 1h13m to go


Date: 2009-07-01 17:44:29 UTC
scrub: resilver in progress, 90.75% done, 1h42m to go


Date: 2009-07-01 15:30:05 UTC
scrub: resilver in progress, 85.29% done, 2h29m to go


Date: 2009-07-01 12:47:38 UTC
scrub: resilver in progress, 75.27% done, 3h52m to go


Date: 2009-07-01 12:18:19 UTC
en juin on a une très forte augmentation de trafic email. du genre
+30% en 1 mois. certains filers ont du mal à acceper autant de
trafic en plus. d'autres ça va.

on a reperé 2 filers vraiment mal et on a décidé de faire de travaux
déjà cette nuit. d'autres vont suivre les nuits suivante.

c'est quoi le but ? les filers saturent en terme de lecture. vous
consultez vos emails et ça fait lire les filers. les disques des
filers sont à 100% de leur capacité. pour avoir plus de capacité
de lecture, on est en train d'ajouter de disques en plus en parallele
de disques déjà en place. ainsi vos lectures vont être repartis sur
10 disques en parallele au lieu de 6. on devrait presque double de
capacité de lecture de ces 2 filers.

mais avant d'en profiter il faut syncroniser les disques avec ceux
déjà en production et c'est ça qu'on a commencé à 1h du matin et
aurait dû se finir vers 8-9h ce matin. mais finalement ça prend
plus de temps.

c'est vraiment pas ce qu'on a l'habitude de faire. je suis vraiment
désolé. là le coup est parti et on ne peut pas revenir avant. il
faut laisser aboutir la syncro. pour les interventions suivantes
on va essayer de voir comment on peut faire ça avec moins
d'indisponibilitée.

tous les emails que vous recevez sont reçus et stocker sur les
serveurs de reception. dés que les filers sont up, les emails
vont être distribués en quelques heures.



Date: 2009-07-01 11:23:42 UTC
L'estimation de remise du filer en route: 18h00.
Ce n'est pas bon du tout. Mais la syncronisation étant en cours
si on remet en marche le filer dans l'état ça ne va pas permettre
le bon fonctionner ni syncroniser.

Par contre une fois que la syncro est terminé, les performances
devraient être au rendez vous (on aura 10 disques en paralele au
lieu de 6).
Posted Jul 01, 2009 - 05:13 UTC