OVHcloud Web Hosting Status

Current status
Legend
  • Operational
  • Degraded performance
  • Partial Outage
  • Major Outage
  • Under maintenance
Repartition de charge a10
Scheduled Maintenance Report for Web Cloud
Completed
Nous avons reçu les nouvelles images qui fixent
les 2 problemes que nous avons remonté:
1. Memory Leak
2. Slowloris/Torhammer attack

Nous mettons à jour les boitiers et nous allons
repasser le trafi de mutu et ovh.* dessus comme
à son habitude.

Update(s):

Date: 2013-03-29 10:26:52 UTC
Visiblement le nouveau fireware ne fonctionne pas.
On arrete là.

Date: 2013-03-29 10:26:03 UTC
le boitier a tendu 350K de sessions simu et a
planté sous l'attaque.

p19-77-a10#sh session brief
Traffic Type Total
--------------------------------------------
TCP Established 318882
TCP Half Open 64456

p19-77-a10#sh log
Log Buffer: 30000
Mar 29 2013 11:21:29 Warning [AX]:conn proxy queue depth exceeds limit (2289001)
Mar 29 2013 11:21:29 Warning [AX]:conn proxy queue depth exceeds limit (2288001)
Mar 29 2013 11:21:29 Warning [AX]:conn proxy queue depth exceeds limit (2287001)
Mar 29 2013 11:21:29 Warning [AX]:conn proxy queue depth exceeds limit (2286001)
Mar 29 2013 11:21:28 Warning [AX]:conn proxy queue depth exceeds limit (2285001)
Mar 29 2013 11:21:28 Warning [AX]:conn proxy queue depth exceeds limit (2284001)


Date: 2013-03-29 10:24:36 UTC
plantage au bout de 12 minutes de l'attaque que
nous avons sur le mutu. l'attaque est geré
correctement par les ACE, mais pas par les AX.

Date: 2013-03-29 10:15:38 UTC
On remet le trafic sur l'un de boitier qui
est protegé contre ce type d'attaque.

p19-77-a10#sh log
Log Buffer: 30000
Mar 29 2013 11:15:31 Warning [AX]:conn proxy queue depth exceeds limit (465001)
Mar 29 2013 11:15:30 Warning [AX]:conn proxy queue depth exceeds limit (464001)
Mar 29 2013 11:15:30 Warning [AX]:conn proxy queue depth exceeds limit (463001)
Mar 29 2013 11:15:30 Warning [AX]:conn proxy queue depth exceeds limit (462001)


Date: 2013-03-29 10:06:15 UTC
L'un de boitiers a planté. On retire tout.

Date: 2013-03-29 10:04:08 UTC
nous avons trouvé le bug dans la configuration qui
entrait en redondance avec le nouveau code. Nous
l'avons retiré. Ca marche.

On pousse kimsufi.com dessus. Ca marche.
Ovh.* ça marche.
tous les mutus: ça marche.

Date: 2013-03-29 08:41:26 UTC
Nous avons mis en place une configuration
parallele avec une nouvelle IP pour pousser
les tests, sans imapcter la production.
Posted Mar 29, 2013 - 08:24 UTC
This scheduled maintenance affected: Web Hosting || Datacenter GRA (Cluster002, Cluster003, Cluster006, Cluster007, Cluster011, Cluster012, Cluster013, Cluster014, Cluster015, Cluster017, Cluster020, Cluster021, Cluster023, Cluster024, Cluster025, Cluster026, Cluster027, Cluster028, Cluster029, Cluster030, Cluster031).