OVHcloud Public Cloud Status

Current status
Legend
  • Operational
  • Degraded performance
  • Partial Outage
  • Major Outage
  • Under maintenance
CLOUD SBG1
Incident Report for Public Cloud
Resolved
Nous avons un incident sur la région SBG1.

Le problème est lié à neutron serveur, nous ajoutons un nouveau nœud pour absorber la charge.

Nous ajoutons aussi un nœud rabbitmq pour améliorer la stabilité de l'infrastructure.

Les impactés :
- toute l'api Openstack
- la création d'instance
- ...

Update(s):

Date: 2016-07-22 20:20:40 UTC
Cette semaine se termine péniblement concernant SBG1. Nous avons dû faire face à 2 problèmes cette fin de semaine.

Côté neutron nous avons rencontré des soucis de connexion avec la base de données dûs à notre LB haproxy. Nous avons contourné en bypassant ces LB. C'est moins fiable en cas de pépin mais ca marche et en attendant, on réétudie tranquillement la solution haproxy.

Côté rabbitMQ encore une fois cette semaine, depuis hier, nous rencontrons des soucis probablement liés à la charge que nous faisons subir au cluster. Notre tuning récent n'a pas suffit et on commence à faire grossir notre cluster pour mieux répartir cette charge. Cela semble tenir, nous surveillons de très près nos clusters rabbitMQ depuis quelques semaines et avons encore quelques pistes d'amélioration qui devraient aboutir à des solutions dans les jours à venir.

Encore une fois, nous sommes désolés pour la gêne occasionnée.

Date: 2016-07-22 11:00:44 UTC
L'ajout du serveur neutron est terminé.

Le serveur rabbitmq est en cours d'ajout.

L'api Openstack est fonctionnelle mais toujours ralenti.
Posted Jul 22, 2016 - 09:25 UTC