OVHcloud Network Status

Current status
Legend
  • Operational
  • Degraded performance
  • Partial Outage
  • Major Outage
  • Under maintenance
Orange
Incident Report for Network & Infrastructure
Resolved
Nous constatons des difficultés d'accès depuis Orange. Nous recherchons la cause du problème.

Update(s):

Date: 2010-07-01 09:22:16 UTC
L'erreur de debutants ...

Date: 2010-07-01 09:20:39 UTC
Lors de travaux
http://travaux.ovh.com/?do=details&id=4275
nous avons migré les ports de gsw-1 vers gsw-2
et nous avons oublié de reannoncer les /30
sur gsw-2

Ca continuait à marcher parce que les routes
ont été annoncé en BGP.

Après la migration d'hier, ça continuait à
marcher. Sauf pour certains prefixe qui ont
été preferé sur gsw-2. Et donc le trafic
venant de rbx-1 voulait aller sur gsw-2
via th1-1 et ont été null router par l'annonce
de 91.121.0.0/16 pour tout le reseau.

th1-1-6k#sh ip route 91.121.131.50
Routing entry for 91.121.0.0/16
Known via \"static\", distance 200, metric 0 (connected)
Advertised by bgp 16276
Routing Descriptor Blocks:
* directly connected, via Null0
Route metric is 0, traffic share count is 1

gsw-2-6k#conf t
gsw-2-6k(config)#router ospf 16276
gsw-2-6k(config-router)#network 91.121.131.48 0.0.0.3 area 0

th1-1-6k#sh ip route 91.121.131.50
Routing entry for 91.121.131.48/30
Known via \"ospf 16276\", distance 110, metric 3, type intra area
Last update from 213.186.32.166 on Port-channel5, 00:00:01 ago
Routing Descriptor Blocks:
* 213.186.32.210, from 213.186.32.95, 00:00:01 ago, via Port-channel4
Route metric is 3, traffic share count is 1
213.186.32.166, from 213.186.32.95, 00:00:01 ago, via Port-channel5
Route metric is 3, traffic share count is 1



Désolé.

Date: 2010-07-01 09:03:04 UTC
Apparament l'origine du probleme est chez Ovh.
On va faire un test sur une /24 pour determiner
où se situe le probleme.

Date: 2010-07-01 07:53:18 UTC
Pas de feedback avec les problemes. Nous fermons le ticket.

Date: 2010-07-01 06:18:04 UTC
Vous avez du voir une coupure entre 7h15 et 7h40 environ.

Le routage vers Orange devrait maintenant être revenu à la
normale pour les clients qui était concernés.

Si vous rencontrez toujours des problèmes vers OVH depuis
Orange, merci de nous l'indiquer sur noc@ovh.net. Nous
avons besoins de votre IP chez Orange.

Date: 2010-07-01 05:16:45 UTC
Nous réactivons le routage via les ports à problèmes afin de diagnostiquer.

Date: 2010-06-30 21:03:17 UTC
Apparament le routage vers 80.14.255.0/24 pose de
problemes côté Orange aussi. Nous avons ouvert un
ticket chez Orange.

Dans tous les cas demain matin on fera les tests
avec les équipes dont nous avons été en contact
aujourd'hui lors du basculement.


Date: 2010-06-30 16:06:51 UTC
Non, pas d'idée sur l'origine du probleme.
On ne souhaite pas reactiver le lien là à 18h
pour effectuer les tests. On laisse donc le
trafic d'écouler via Telehouse 1 uniquement.

Demain matin 7h00 nous allons reactiver le
port et regarder avec les équipes d'Orange
pourquoi le trafic ne s'ecoule pas correctement
sur leur reseau.

Si vous avez été impacté à ce probleme, merci
de poster à oles@ovh.net, gui@ovh.net votre IP
chez Orange. Ceci nous permettra de faire les
verifications demain sur le bon ou mauvais
fonctionnement vers votre connexion.

Merci ! et désolé ...

Date: 2010-06-30 15:15:37 UTC
Le trafic s'ecoule pour l'instant par les 2x10G que
nous avons sur Telehouse 1.

Date: 2010-06-30 15:12:20 UTC
OVH a 2 peering privé de 2x10G avec Orange. L'un sur
Telehouse 1 et l'autre sur Global Switch.

Ce matin nous avons basculé la configuration sur
Global Switch vers une configuration en port channel
http://travaux.ovh.com/?do=details&id=4325

Tout s'est bien deroulé.

Depuis 16h45, on observe une chute de 25% de trafic
global d'Ovh vers Orange. Soit 50% sur le trafic
à Global Switch. Il n'y a aucun changement côté
Telehouse 1.

On vient de couper la session BGP sur Global Switch,
tout est revenu.
On la reactivé. Encore 50% de trafic en moins.
Il ne s'agit pas de perte de packets. C'est une
coupure net pour certains client.

On conclue à un probleme chez Orange. On laisse
le port down et on les contact.
Posted Jun 30, 2010 - 15:05 UTC