Tasa elevada de errores en servicios de autorización

Incident Report for Billpocket

Postmortem

Problematica

Se generaba la caída del nodo Santa fe private.hydra.prosanvirginia.billpocket.com debido a que al generarse una desconexión en el enlace primario al tratar de hacer el failover al enlace secundario, no lograba establecer de forma correcta el enlace de comunicación.

Causa Raíz

Se llevaron carias ventanas coordinadas con el proveedor Fló Networks, PROSA y Javier Cruz de billpocket Cloud, para encontrar la causa de los errores de comunicación, detectando un error en la configuración de los ruteos por parte del proveedor Fló Network.

Solución.

Fló Network solucionó los problemas en la tabla de ruteo en la ventana del Miércoles 4 de Octubre del 2023, durante la ventana se simularon caídas del nodo principal y el nodo secundario, verificando a su vez que la conmutación por error se realizó correctamente. Se confirmo que la configuración realizada esta también en el nodo de Triara.

Desde el 4 de octubre no se han presentado más desconexiones, han existido caídas que automáticamente se restablecen, lo cuál indica que el failover es correcto.

Posted Oct 16, 2023 - 15:39 UTC

Resolved

El proveedor del servicio ya resolvió la cáida, se llevó el caso para análisis para validar la causa de este tipo de incidentes, se programará una ventana posterior para realizar algunas pruebas y en su caso resolver de fondo la problemática.

Posted Sep 01, 2023 - 16:28 UTC

Monitoring

Se ha restablecido la comunicación del servicio, vamos a monitorear la conexión

Posted Sep 01, 2023 - 16:08 UTC

Update

We are continuing to work on a fix for this issue.

Posted Sep 01, 2023 - 16:08 UTC

Update

Estamos en sesión con el proveedor del servicio para detectar este problema

Posted Sep 01, 2023 - 15:40 UTC

Update

Se notifico al proveedor del servicio el problema se levanto el ticket CS-176809

Posted Sep 01, 2023 - 08:46 UTC

Identified

Se ha detectado la caída del enlace dedicado de Santa Fe con PROSA, existen declinaciones de algunas devoluciones, la operación continúa por Triara.

Posted Sep 01, 2023 - 08:40 UTC

This incident affected: Authorization Services (Hefesto, Hydra), E-commerce Platform (Lancehorn, Paywith, Pago a Distancia), and Mobile Apps (Billpocket (Android), Billpocket (iOS)).