Unexus - Notice history

De storing is inmiddels verholpen. Wij hebben meerdere bevestigingen van onze klanten ontvangen.

In 1 van onze datacenters is een major storing. Wij hebben de verbindingen overgeschakeld naar ons backup datacenter. De verbindingen zijn nu herstellende.

Ondertussen is er een update vanuit de provider gekomen. Het blijkt ondertussen herstellende te zijn. Zie hieronder.

We houden deze pagina zo veel mogelijk up-to-date.

20220328 - Problemen op interconnect verbindingen met andere providers - herstellende Engineers hebben alle interconnects met de andere providers weer online. Gesprekken tussen ons platform en andere providers zijn herstellende

Engineers hebben 1 van de interconnecst al kunnen herstellen waardoor de impact op mobiel is afgenomen en er weer gebeld kan worden tussen ons en KPN. De andere andere interconnect met andere providers wordt nu aan gewerkt.

Op dit moment is er sprake van een verstoring. Deze verstoring heeft vooralsnog betrekking op inkomende en uitgaande telefonie tussen ons platform en andere Providers. Onze engineers hebben het probleem in onderzoek. De verwachte oplostijd is op dit moment nog niet af te geven.

Wij zullen u omstreeks 15:30 of eerder voorzien van een update op de status van de verstoring. Er zijn helaas geen workarounds mogelijk.

Onze excuses voor het ongemak.

De provider heeft aangegeven dat het sinds 28 maart 15:20 is opgelost.

Vanuit de provider krijgen we door dat het vanaf 12:00 beter zou moeten gaan. Mocht dit niet zo zijn kan dit bij ons gemeld worden zodat wij dit door kunnen geven aan de provider. (Graag met voorbeeld gesprekken. Tijdstip/nummer van de beller)

"Engineers hebben een mogelijke oorzaak gevonden en verholpen. De problemen zouden hierdoor moeten afnemen. Indien klanten nog problemen ervaren na 12:00, graag dit via een ticket bij Support aangeven."

We hebben onderstaande verklaring gekregen vanuit de provider.

"Op dit moment is er sprake van een mogelijke verstoring. Deze verstoring heeft vooralsnog betrekking op one-way audio op Managed Voice 2 en Voice Connect. Onze engineers verzoeken om voorbeelden met aan welke zijde de audio problemen spelen. Onze engineers hebben het probleem in onderzoek. De verwachte oplostijd is op dit moment nog niet af te geven.

Wij zullen u omstreeks 12:00 of eerder voorzien van een update op de status van de verstoring. Er zijn helaas geen workarounds mogelijk.

Onze excuses voor het ongemak."

De verstoring is gaandeweg de ochtend en geheel om 12:30 opgelost.

Als reactie op de stormen van het weekend was het aanbod gesprekken dermate hoog dat deze een congestie op het netwerk veroorzaakte.

We hebben diverse aanpassingen gedaan om zo meer gelijktijdige gesprekken af te kunnen handelen.

Hiermee verwachten wij een dergelijke probleem in de toekomst te voorkomen.

Op dit moment lijkt het er op dat de situatie stabiliseert. Dit neemt niet weg dat er toch nog bij diverse klanten af en toe gesprekken wegvallen. We blijven doorzoeken tot de oorzaak gevonden is.

Het lijkt een landelijke storing te zijn bij een provider of meerder providers. Waarschijnlijk drukte op het telefonienetwerk vanwege de storm van afgelopen weekend. Om uit te sluiten dat het probleem aan onze kant ligt blijven we de situatie monitoren.

Onze experts werken met de grootste urgentie aan het zoeken naar de oorzaak van dit probleem. We verzekeren u dat dit top-prioriteit heeft.

Voiceworks meldt:

Opgelost

De oorzaak van de verstoring lag in het noodzakelijke preventieve terugdraaien van een onderhoud wat afgelopen nacht heeft plaatsgevonden. Tijdens onderzoek werd packetloss bij een nieuw onderdeel op het voice platform waargenomen zonder duidelijke oorzaak. Hierbij werden geen klachten waargenomen in de dienstverlening. Tijdens het onderzoek is besloten om het nieuwe onderdeel uit te sluiten door de eerdere configuratie weer actief te zetten. Hierbij is het onverwachte issue opgetreden.

We are continuing to work on a fix for this incident.

De genomen maatregelen hebben geleid tot een stabiele omgeving.

Afgelopen weekend zijn nog enkele aanpassingen gedaan in de routering. Vanochtend hebben wij gezien dat de situatie genormaliseerd is. We houden komende dagen de vinger aan en blijven zoeken naar de oorzaak.

De oorzaak is extern. Dit probleem is op dit moment beperkt tot enkele klanten, daarom zal met betrokken klanten via de tickets gecommuniceerd worden en zullen geen updates gegeven meer worden via unexusservice.nl.

We zijn ons terdege bewust dat dit probleem bij vele klanten tot grote verstoringen leidt. Het vinden van dit waarschijnlijk externe probleem heeft onze hoogste prioriteit.

Vandaag zijn alle interne componenten geanalyseerd en er zijn sterke indicaties dat het probleem door externe netwerk configuraties veroorzaakt wordt. We gaan door met ons onderzoek en zullen indien er concrete aanwijzingen zijn de desbetreffende partijen benaderen om het probleem opgelost te krijgen.

Vannacht zijn de services herstart. De problemen gisteren deden zich met name voor op drukke momenten. We monitoren de systemen nu om te kijken of bij de drukke momenten de problemen zich nog steeds voordoen.

De oorzaak van de problemen die diverse klanten ervaren hebben is nog niet bekend. Terwijl het onderzoek loopt zullen we preventief vanavond gerelateerde services herstarten.

Het probleem lijkt zich te beperken tot vaste toestellen. Issue wordt verder onderzocht.