rssLink RSS for all categories
 
icon_red
icon_green
icon_red
icon_blue
icon_red
icon_green
icon_green
icon_orange
icon_red
icon_red
icon_green
icon_green
icon_green
icon_orange
icon_green
icon_green
icon_green
icon_blue
icon_red
icon_red
icon_green
icon_green
icon_green
icon_blue
icon_orange
icon_blue
icon_green
icon_green
icon_green
icon_green
icon_red
icon_red
icon_green
icon_green
icon_green
icon_green
 

FS#9542 — Centrale telephonique

Attached to Project— VoIP
Incident
Backend / Core
CLOSED
100%
Un incident est en cours sur la centrale téléphonique.
Date:  Tuesday, 21 January 2014, 07:56AM
Reason for closing:  Done
Comment by OVH - Friday, 18 October 2013, 17:11PM

Nous avons rencontré un problème similaire à celui d'hier, malgré le changement des paramètres de la sonde.

Les lignes SIP sont remontées, les lignes MGCP sont en cours.


Comment by OVH - Friday, 18 October 2013, 17:12PM

Nous relançons les affichages des MGCP.


Comment by OVH - Friday, 18 October 2013, 17:18PM

Nous avons désactivé la sonde.


Comment by OVH - Friday, 18 October 2013, 18:19PM

Un crash de la gateway MGCP a provoqué des instabilités sur le SIP. Le problème est en analyse chez le constructeur.
Tous les afficheurs des postes MGCP ont été réinitialisé.


Comment by OVH - Friday, 18 October 2013, 20:33PM

C'est trop ! Depuis 1 an nous avons une nouvelle infrastructure
du constructeur qui a été commandée, et configurée mais qui
n'est toujours pas en production à cause d'un bug mineur (le
renvoi d'appel ne fonctionne pas parfaitement bien). Le patch
qui doit fixer le problème n'est toujours pas developpé. On ne
peut plus attendre: nous allons basculer les clients SIP
d'ADSL BOX d'Ovh sur cette nouvelle infrastructure comme
c'était prevu de longe date. Ceci déchargera l'infra principale
qui visible est surchargée (alors qu'on tourne à 10% de specs
tech du constructeur).

On est en train de faire les dernières vérifications avant
la reconfiguration de packets SIP venant de BOX ADSL d'Ovh.
On se donne cette nuit et ce week-end pour restabiliser
l'infrastructure et éviter de nouvelles pannes.

En parallèle, on est en train de regarder pour mettre
en place 2 nouvelles infrastructures en plus (on aura donc 4)
et réduire le nombre des clients par infra. On sait que tout
fonctionne parfaitement bien avec moins de 100000 lignes par
infra. Avec une marge de sécurité, le nouveau objectif est
de descendre à moins de 30000 lignes par infra. Avec cette
ligne les problèmes n'existeront plus.

C'est parti ! La nuit sera longe ..


Comment by OVH - Friday, 18 October 2013, 21:13PM

Nous poursuivons les tests sur
toutes les lignes adsl internes du parc ainsi
que sur les lignes individuelles, non compatible
avec les transferts d'appels.

Nous entamons également les tests sur les
fonctionnalités du manager afin de limiter
les effets de bord.


Comment by OVH - Friday, 18 October 2013, 21:39PM

Les tests du manager et des appels se sont effectués avec succès,
nous vérifions l'intégrité des données entre les deux infrastructures.


Comment by OVH - Saturday, 19 October 2013, 00:18AM

Nous redémarrons la machine de secours, le but est de réinitialiser tous les services et la mémoire de la machine.


Comment by OVH - Saturday, 19 October 2013, 00:23AM

Nous testons un correctif sur la nouvelle infra pour les redirections d'appels et renvoi vers les répondeurs.


Comment by OVH - Saturday, 19 October 2013, 01:01AM

Les tests avec le correctif sont pour pour le moment concluant. Nous continuons les tests.


Comment by OVH - Saturday, 19 October 2013, 01:13AM

Nous migrons les lignes SIP xDSL sur la nouvelle infrastructure.


Comment by OVH - Saturday, 19 October 2013, 02:45AM

50% des lignes sont migrées.


Comment by OVH - Saturday, 19 October 2013, 03:18AM

100% des lignes sont migrées, nous forçons le reload du SIP sur les modems.


Comment by OVH - Saturday, 19 October 2013, 03:45AM

Les SIP modems sont reloadés. Nous surveillons la stabilité de la nouvelle infra.


Comment by OVH - Saturday, 19 October 2013, 10:20AM

Concernant l’éventuel problème sur le renvoi d'appel
ou le répondeur, nous l'avons fixé en mettant en
place une version du gateway SIP plus ancienne. Tout
doit donc fonctionne sans problème.


Comment by OVH - Saturday, 19 October 2013, 11:05AM

Nous avons des remontés d'erreurs d'appels. Correspondant occupé, appel entrant impossible. Nous investiguons.


Comment by OVH - Saturday, 19 October 2013, 11:26AM

Nous testons d'autres paramètres pour améliorer la stabilité.


Comment by OVH - Saturday, 19 October 2013, 12:21PM

Nous avons mis en place une nouvelle configuration. Nous surveillons la stabilité.


Comment by OVH - Saturday, 19 October 2013, 12:25PM

Nous redémarrons les services.


Comment by OVH - Saturday, 19 October 2013, 12:34PM

Les appels passent correctement en entrant et sortant. Nous poussons les tests.


Comment by OVH - Saturday, 19 October 2013, 13:13PM

Les appels entrant/sortant vers OVH et externe ainsi que toutes les fonctionnalitées (répondeur/renvois/plages horaires/rejet/busy/...) sont pleinement opérationnelles. Nous surveillons la stabilité des infrastructures.


Comment by OVH - Saturday, 19 October 2013, 17:23PM

Nous préparons la migration des lignes individuelles compatibles.


Comment by OVH - Saturday, 19 October 2013, 18:48PM

Nous allons effectuer la migration des lignes individuelles compatibles sur la nouvelle infrastructure cette nuit, lorsqu'il n'y aura plus d'appel. Les postes se réenregistreront lors de leur prochaine demande Un reboot du poste peut accélérer ce réenregistrement si besoin.


Comment by OVH - Sunday, 20 October 2013, 00:02AM

Nous migrons les lignes individuelles.


Comment by OVH - Sunday, 20 October 2013, 00:24AM

La migration est terminée.


Comment by OVH - Monday, 21 October 2013, 13:33PM

Nous avons des remontées sur des problèmes de fonctionnement des redirections DDI pour les lignes migrées sur la nouvelle infrastructure.
Nous faisons la migration inverse pour ces cas et cherchons une solution, comme l'utilisation du cloudHunting pour les redirects.


Comment by OVH - Monday, 21 October 2013, 14:20PM

Les lignes impactées ont été migré et le SIP relancé sur les modems.


Comment by OVH - Monday, 21 October 2013, 15:22PM

Nous avons amélioré nos règles de filtrage du traffic, notamment les mauvais packets sur le MGCP. Cela apporte une amélioration significative de la gestion du traffic MGCP.


Comment by OVH - Tuesday, 22 October 2013, 21:53PM

Nous avons corrigé le problème d'appel d'une ligne sur la nouvelle infrastructure vers un cloudIvr ou cloudHunting.
Concernant les quelques remontées pour des problèmes d'appels d'une ligne sur la nouvelle infrastructure vers un numéro porté ou redirection DDI, nous allons effectuer une resynchronisation des bases.


Comment by OVH - Friday, 25 October 2013, 01:32AM

Nous mettons à jour la configuration de l'infrastructure dans un but d'optimisation.
Les nouveaux appels ne seront pas possible pendant quelques secondes lors du rechargement, aucun impact pour les communications en cours.


Comment by OVH - Friday, 25 October 2013, 01:58AM

La nouvelle configuration est en place.


Comment by OVH - Wednesday, 30 October 2013, 15:52PM

Nous travaillons à la résolution des derniers bugs détectés sur la nouvelle infrastructure : pas de marque blanche, pb d'appel sur des configurations spécifiques DDI et
easy/mini pabx en mode //, redirection numéro SVA. Tous les lignes concernées sont automatiquement migrées sur l'ancienne infrastructure par un robot en attendant la résolution complète.

En parallèle nous mettons en place la seconde nouvelle infrastructure pour poursuivre la migration.


Comment by OVH - Wednesday, 30 October 2013, 18:46PM

Le problème spécifique à la redirection DDI vers une ligne sur la nouvelle infrastructure est corrigé.


Comment by OVH - Monday, 04 November 2013, 19:51PM

Nous avons détecté et corrigé un problème avec les lignes Suisses sur la nouvelle infrastructure.


Comment by OVH - Tuesday, 05 November 2013, 17:07PM

Nous allons mettre en place un patch permettant de corriger certains problèmes de
supervision sur l'ancienne infrastructure.

Nous mettrons en place ce patch cette nuit.


Comment by OVH - Tuesday, 05 November 2013, 23:26PM

Nous entamons l'application du patch.


Comment by OVH - Tuesday, 05 November 2013, 23:38PM

La maintenance est terminée.


Comment by OVH - Wednesday, 06 November 2013, 16:06PM

Nous préparons la migration des lignes individuelles MGCP sur la nouvelle infrastructure cette nuit.


Comment by OVH - Wednesday, 06 November 2013, 16:26PM

Nous allons aussi cette nuit mettre en place une nouvelle version de la gateway SIP sur la nouvelle infrastructure.
Cette version corrige les problèmes rencontrés sur certaines configurations avec renvoi inconditionnel.


Comment by OVH - Thursday, 07 November 2013, 10:27AM

Le patch est en place sur a nouvelle infrastructure. Tous les problèmes cités précédemment on été corrigé : marque blanche, easy/mini pabx en mode //, redirection numéro SVA. Nous préparons de nouvelles migrations.


Comment by OVH - Thursday, 14 November 2013, 11:37AM

Les migrations continuent. Une seconde nouvelle infrastructure arrive cette semaine et va être ajouté au cluster. Ce qui nous permettra de finaliser les migrations avec les limitations d'utilisation par infrastructure que nous avons défini.


Comment by OVH - Wednesday, 20 November 2013, 17:01PM

Nous avons reçu la seconde infrastructure du nouveau cluster. Nous effectuerons l'installation physique cette nuit.


Comment by OVH - Friday, 22 November 2013, 14:18PM

Nous démarrons la configuration et la validation du nouvel équipement.


Comment by OVH - Thursday, 05 December 2013, 19:36PM

Nous démarrons la synchronisation des données entre les équipements.


Comment by OVH - Wednesday, 11 December 2013, 16:42PM

Nous procédons à l'étape de synchronisation du cluster.

Il est possible de voir une latence de plusieurs minutes dans
les changements des configurations des lignes depuis le
manager pendant cette phase.


Comment by OVH - Wednesday, 11 December 2013, 17:37PM

La synchronisation s'est terminée avec succès. Les actions demandées depuis le manager sont en cours de résorption.


Comment by OVH - Tuesday, 17 December 2013, 14:58PM

La nouvelle infrastructure b est en production dans le cluster.


Comment by OVH - Thursday, 19 December 2013, 10:11AM

Nous atteignons les 50,000 lignes sur la nouvelle infrastructure a, soit juste en dessous de l'objectif des 30% d'utilisation.
Nous allons donc démarrer les migrations sur la nouvelle infrastructure b et préparons aussi la mise ne place de la troisième infrastructure.


Comment by OVH - Thursday, 19 December 2013, 18:39PM

Nous avons adapté la configuration de nos équipements suite à des remontés de
retour de sonnerie blanche.