OVHcloud Web Hosting Status

Current status
Legend
  • Operational
  • Degraded performance
  • Partial Outage
  • Major Outage
  • Under maintenance
ajout de nouveaux disques
Scheduled Maintenance Report for Web Cloud
Completed
Nous ajoutons les nouveaux disques dans les RAID de certains
filers qui sont surchargés. La syncroniser de données va
prendre minimum 12h max 3j pour certains filers. L'objectif
est de retrouver les performances de l'installation quelques
soit le pic d'activité.

Update(s):

Date: 2009-08-31 14:14:25 UTC
fini.

Date: 2009-08-30 10:02:04 UTC
filerz75: fini
filerz79: fini

on ajoute les nouveaux disques dans le filerz79

Date: 2009-08-29 19:46:57 UTC
filerz75: fini (ah les filers sans les disques pourris ça fait plaisir)
on vient d'ajouter un nouveau disque pour augmenter encore la capacité
du filer

filerz79
scrub: resilver in progress, 53.84% done, 12h42m to go
2 diqsues sont en cours de syncro en même temps. après
il reste encore 2 disques.

Date: 2009-08-29 10:01:44 UTC
filerz75
scrub: resilver in progress, 15.70% done, 8h34m to go
filerz79
scrub: resilver in progress, 13.55% done, 32h18m to go


Date: 2009-08-29 09:31:06 UTC
filerz75
scrub: resilver in progress, 8.02% done, 12h25m to go
filerz79
scrub: resilver in progress, 8.16% done, 51h22m to go


Date: 2009-08-29 08:26:05 UTC
filerz75
après avoir enlevé les disques, nous avons remis 1 disque à
syncroniser pour augmenter la capacité du filer

Date: 2009-08-29 05:34:18 UTC
il n'y a pas de degradation dans le service

Date: 2009-08-29 04:58:16 UTC
filerz79: FINI
nous avons enlevé les SAMSUNG
et on vient d'ajouter les nouveaux disques
scrub: resilver in progress, 0.03% done, 46h43m to go


Date: 2009-08-29 02:55:17 UTC
filerz75: FINI
nous avons enlevé les disques SAMSUNG.
filerz79
scrub: resilver in progress, 93.93% done, 3h24m to go


Date: 2009-08-28 12:57:11 UTC
filerz75
scrub: resilver in progress, 89.92% done, 4h17m to go
filerz79
scrub: resilver in progress, 75.24% done, 12h45m to go


Date: 2009-08-28 02:46:53 UTC
filerz75
scrub: resilver in progress, 81.48% done, 6h24m to go
filerz79
scrub: resilver in progress, 62.22% done, 17h20m to go


Date: 2009-08-27 21:18:45 UTC
filerz75
scrub: resilver in progress, 36.36% done, 39h46m to go
filerz79
scrub: resilver in progress, 49.72% done, 23h20m to go

la syncro est toujours en cours. ça prend du temps à cause
de disques SAMSUNG qui posent de problemes de lenteur.

comme déjà indiqué, IL N'Y A PAS DE PANNE DANS LE SERVICE.



Date: 2009-08-26 07:38:11 UTC
filerz75
scrub: resilver in progress, 22.94% done, 30h34m to go
filerz79 l'un de disques a posé de probleme, le SAMSUNG et la syncro est reparti depuis le debut
scrub: resilver in progress, 33.82% done, 18h21m to go


Date: 2009-08-25 16:42:43 UTC
filerz75
scrub: resilver in progress, 30.40% done, 41h36m to go
filerz79
scrub: resilver in progress, 41.19% done, 26h20m to go


Date: 2009-08-25 12:14:48 UTC
filerz77: FINI

Date: 2009-08-25 11:43:24 UTC
La situation est un peu près stable. Nous avons enlevé le
systeme de monitoring de fonctionnement de webmail et ça
marche nickel maintenant. Il faudra réecrire. les filers
finissent de se syncroniser. le retard dans la distribution
des emails a été ratrapé. Pff ... penible penible penible.

Date: 2009-08-25 09:23:28 UTC
Le systeme de monitoring (qui verifie que toutes les machines sont
correct) enleve et rajoute les serveurs webmail dans le cluster.
On vient de le couper. On va regarder pourquoi les machines se
declarent en défaut.

Le webmail doit nettement mieux marcher maintenant.

Date: 2009-08-25 08:39:24 UTC
filerz79: on le sort du cluster, il est très chargé et desabilise
le webmail

Date: 2009-08-25 08:23:48 UTC
filerz73 FINI. il a été remis dans le cluster. les emails reçus
sont en cours d'enregistrement sur le filer. il n'y a pas de
perte d'emails.

Date: 2009-08-25 07:46:09 UTC
filerz73 la syncronisation est en train de se terminer, enfin !
scrub: resilver in progress for 21h51m, 98.55% done, 0h19m to go
filerz75
scrub: resilver in progress, 25.36% done, 27h7m to go
filerz77
scrub: resilver in progress, 71.49% done, 3h38m to go
filerz79
scrub: resilver in progress, 34.29% done, 18h11m to go



Date: 2009-08-25 06:11:24 UTC
nous avons essayé de remettre le filez73 dans le cluster
et de gerer la charge, mais ça ne tient pas. la reconstruction
prend tellement de resources que le filer ne peut pas prendre
en plus la charge. nous allons laisser le filer hors du cluster
et il se remettra dans le cluster dés que la syncro sera terminée.
on pense que ça sera fait debut vers midi/debut de l'apres midi.

les autres filers n'ont pas de probleme malgré la syncronisation.

Date: 2009-08-25 05:09:16 UTC
filerz73: ça va être dur, le filer est remis dans le cluster
scrub: resilver in progress for 19h12m, 87.83% done, 2h39m to go
filerz75
scrub: resilver in progress, 19.33% done, 27h27m to go
filerz76: FINI
filerz77
scrub: resilver in progress, 53.10% done, 5h45m to go
filerz79
scrub: resilver in progress, 24.34% done, 21h26m to go


Date: 2009-08-24 21:42:08 UTC
filerz73: desactivé dans le cluster. on espere qu'il finira la syncro avant 8h du matin. c'est le filer qui pose le plus de probleme actuellement.
scrub: resilver in progress for 11h45m, 59.12% done, 8h7m to go
filerz74: FINI
filerz75: il syncronise tranquilement, pas de degradation de qualité
scrub: resilver in progress, 18.98% done, 65h15m to go
filerz76: desactivé, il devrait finir dans 2h environ. il va se remettre automatiquement dans le cluster dés la fin de la syncro
scrub: resilver in progress for 15h29m, 96.47% done, 0h34m to go
filerz77 il syncronise tranquilement, pas de degradation de qualité
scrub: resilver in progress, 60.39% done, 5h20m to go
filerz79 il syncronise tranquilement, pas de degradation de qualité
scrub: resilver in progress, 34.89% done, 28h20m to go
filerz81: FINI

filerz76 devrait finir dans 2H, donc c'est bon. et on espere que
filerz73 finira avant le petit matin. sinon les autres filers
n'ont pas de degradation de qualité. ça fonctionne sans probleme.

Date: 2009-08-24 21:15:30 UTC
filerz74: FINI
il a été remis dans le cluster.

Date: 2009-08-24 21:02:44 UTC
filerz76 pareil.

Date: 2009-08-24 20:59:00 UTC
filerz73
filerz74
on enleve ces 2 filers du cluster. la surcharge due à la syncronisation
est très forte et ces 2 filers sont constament out. on les laisse en
dehors du cluster afin que la syncronisation accelere.

Date: 2009-08-24 19:47:55 UTC
filerz73
scrub: resilver in progress for 9h52m, 47.10% done, 11h5m to go
filerz74
scrub: resilver in progress for 22h26m, 97.92% done, 0h28m to go
filerz75
scrub: resilver in progress, 13.41% done, 86h33m to go
filerz76
scrub: resilver in progress for 13h36m, 93.42% done, 0h57m to go
filerz77
scrub: resilver in progress, 47.38% done, 6h56m to go
filerz79
scrub: resilver in progress, 31.31% done, 29h9m to go
filerz81: FINI
scrub: resilver completed with 0 errors on Mon Aug 24 21:22:37 2009




Date: 2009-08-24 14:06:16 UTC
filerz73
scrub: resilver in progress for 4h10m, 2.36% done, 172h22m to go
filerz74
scrub: resilver in progress for 16h44m, 95.59% done, 0h46m to go
filerz75
scrub: resilver in progress, 3.85% done, 192h10m to go
filerz76
scrub: resilver in progress for 7h54m, 72.88% done, 2h56m to go
filerz77 il a fini, on a viré les SAMSUNG, on a remis les vrais disques
scrub: resilver in progress, 1.02% done, 52h20m to go
filerz79
scrub: resilver in progress, 4.05% done, 179h48m to go
filerz81 il a fini, on a viré les SAMSUNG, on a remis les vrais disques
scrub: resilver in progress, 98.42% done, 0h2m to go



Date: 2009-08-24 10:31:52 UTC
filerz73
scrub: resilver in progress for 0h37m, 0.69% done, 88h41m to go
filerz74
scrub: resilver in progress for 13h10m, 93.93% done, 0h51m to go
filerz75
scrub: resilver in progress, 1.30% done, 313h58m to go
filerz76
scrub: resilver in progress for 4h20m, 39.99% done, 6h30m to go
filerz77
scrub: resilver in progress, 94.08% done, 0h15m to go
filerz79
scrub: resilver in progress, 1.52% done, 261h18m to go
filerz81
scrub: resilver in progress, 93.79% done, 0h16m to go


Date: 2009-08-24 09:58:50 UTC
Les filers suivants sont concernés:
filerz74 il est surchargé et on peut parfois avoir de coupure dans le service
filerz76 très surchargé, on intervient regulierement pour le decharger
filerz73 syncronisation est correct
filerz81 syncronisation est correct
filerz79 la syncronisation n'avant pas. le filer chargé
filerz75 la syncronisation n'avant pas. le filer chargé
filerz77 syncronisation est correct

Date: 2009-08-24 09:54:33 UTC
Nous sommes aussi en train d'enlever les derniers disques SAMSUNG
qui posent de problemes.
Posted Aug 24, 2009 - 09:53 UTC