État de la plateforme de téléphonie GoCo
Consultez ci-dessous l’état des différents services et composantes de la plateforme GoCo en temps réel.
|
GoCo Telephony Platform Status
Consult the status of the various services and components of the GoCo platform in real time.
Ubity Incident: Serveur de Voix | Voice Gateway (VGW)
Incident Report for GoCo
Postmortem

(english below)

Sujet : Pannes du 6 sept. et 12 sept. 2019

Le 6 septembre entre 13h30 et 14h15 et le 12 septembre entre 09h00 et 09h45, Ubity a subi une panne de son infrastructure voix qui a affecté ses services. Les effets de ces pannes se sont traduits par des incapacités intermittentes à initier et/ou recevoir des appels. Nous avons pu constater que la panne du 6 septembre s’est dissipée rapidement et a impactée nombre limité de clients. La panne du 12 septembre a été généralisée de façon intermittente à l’ensemble des clients.

L’identification de la source du problème des deux pannes a seulement pu être déterminée le 12 septembre et nous avons pu conclure que la source des deux pannes était la même, soit un enjeu avec les équipements de sauvegarde de données (SAN - Storage Area Network)

Suite à plusieurs heures d’analyses, nous avons pu établir que la configuration de notre unité de stockage (SAN) était en cause. Ubity est présentement en déploiement de sa nouvelle infrastructure (Ubity 2.0) qui a débuté en janvier 2019 et qui se terminera en décembre 2019. Cette nouvelle infrastructure rehaussera de façon importante le niveau de service. Nous avons donc conclu que malgré le fait que la configuration de notre SAN est adéquate dans notre environnement actuel, le déploiement en parallèle de notre nouvelle infrastructure Ubity 2.0 est venu exacerber une limitation. Cette limitation de performance sur les SAN a donc été adressée par nos spécialistes et les spécialistes du manufacturier et la situation de performance est maintenant réglée.

Nous continuons à réitérer notre engagement à mieux vous servir et c’est dans cet esprit qu’Ubity s’est engagé dans ce grand chantier qu’est celui d’Ubity 2.0. À cet égard, vous recevez déjà et vous continuerez de recevoir des avis de maintenance jusqu’à la complétion du projet, c’est-à-dire, en décembre de cette année.

Veuillez accepter nos excuses les plus sincères pour les désagréments subis lors de ces deux pannes.

**************

Subject: Outages on September 6th and September 12th, 2019

On September 6th between 13:30 and 14:15 and on September 12th between 09:00 and 09:45, Ubity suffered a breakdown of its voice infrastructure that affected its services. The effects of these failures resulted in an intermittent inability to initiate and/or receive calls. We were able to see that the September 6th outage dissipated quickly and had an impact on a limited number of customers. The September 12th outage was intermittently extended to all customers.

The identification of the source of the problem of the two failures could only be determined on September 12th and we were able to conclude that the source of the two failures was the same, which is an issue with Storage Area Network (SAN) equipment.

After several hours of analysis, we were able to establish that the configuration of our storage unit (SAN) was in question. Ubity is currently deploying its new infrastructure (Ubity 2.0) which began in January 2019 and will end in December 2019. This new infrastructure will significantly improve the level of service. We therefore concluded that despite the fact that our SAN configuration is adequate in our current environment, the parallel deployment of our new Ubity 2.0 infrastructure has exacerbated a limitation. This SAN performance limitation has therefore been addressed by our specialists and the manufacturer's specialists and the performance situation is now resolved.

We continue to reiterate our commitment to serve you better and it is in this spirit that Ubity is committed to this great project that is Ubity 2.0. In this regard, you are already receiving and will continue to receive maintenance notices until the project is completed, in December of this year.

Please accept our sincere apologies for the inconvenience caused by these two failures.

Posted Sep 17, 2019 - 10:37 EDT

Resolved
(English below)

Cher client,

Nous avons éprouvé plus tôt aujourd'hui un problème avec un serveur de Voix.

Impacts:

Les effets de cette problématique auraient pu se traduire en des délais anormaux ou des microcoupures intermittentes.

Après avoir identifié la source du problème, notre équipe technique a rapidement appliqué un correctif afin de rétablir le serveur. À ce moment-même, le problème devrait être résolu et le service complètement rétabli.

Nous sommes désolés des inconvénients et vous remercions de votre compréhension.

***

Dear Customer,

Earlier today, we experienced an issue with a Voice gateway.

Impacts:

The repercussions of this problem could have resulted in abnormal delays or intermittent micro interruptions.

After having identified the cause of the issue, our technical team quickly applied corrective measures in order to restore the VGW. At this time, the issue should be resolved and the service fully restored.

We are sorry for the inconveniences and thank you for your understanding.
Posted Sep 12, 2019 - 12:22 EDT
Monitoring
A fix has been implemented and we are monitoring the results.
Posted Sep 12, 2019 - 10:26 EDT
Identified
(English below)

Cher client,

Nous éprouvons actuellement un problème avec un serveur de Voix.

Impacts:

Ceci pourrait potentiellement entraîner des délais anormaux ou des microcoupures intermittentes.

Soyez assuré que notre équipe travaille à rétablir le serveur le plus rapidement possible.

Nous sommes désolés des inconvénients et vous remercions de votre compréhension.

***

Dear Customer,

We are currently experiencing an issue with a Voice gateway.

Impacts:

This could potentially cause abnormal delays or intermittent micro interruptions.

Rest assured that our team is working to restore the VGW as quickly as possible.

We are sorry for the inconveniences and thank you for your understanding.
Posted Sep 12, 2019 - 09:13 EDT
This incident affected: Serveurs de Voix | Voice Gateways (VGWs) (VGW 1, VGW 2, VGW 3, VGW 4, VGW 5, VGW 6, VGW 7, VGW 8, VGW 9, VGW 10, VGW 11, VGW 12, VGW 13, VGW 14, VGW 15, VGW 16, VGW 17, VGW 18, VGW 19, VGW 20).