Postmortem -
Read details
Jun 29, 00:06 CEST
Resolved -
8:42 p.m. (UTC+2) The back-office systems for WeezTicket (ticketing) and WeezPay (cashless payments), as well as the online payment widgets, are no longer accessible.
Our teams are fully engaged in identifying the cause of this incident and restoring full service functionality.
8:47 p.m. (UTC+2) The Bunny.net CDN (Content Delivery Network), used by Weezevent and 1.5 million websites worldwide, appears to be experiencing issues that are causing this incident. The automatic switchover to CloudFront, Weezevent’s backup CDN, is underway.
8:55 p.m. (UTC+2) The back-office systems and online payment widgets are once again fully accessible, with minimal disruptions to non-critical functions.
9:15 p.m. (UTC+2) The incident has been resolved. No data was lost, and the incident had no impact on on-site operations. Only the implementation of new configurations, real-time sales tracking, and online top-ups were unavailable for 17 minutes.
We continue to closely monitor the service to ensure its stability and apologize for the inconvenience caused.
Retrospective Analysis by Bunny.net
Cause: A temporary connectivity issue with one of their upstream providers between 8:34 p.m. and 8:57 p.m. (UTC+2).
Impact: Disruptions in access to the dashboard, storage services, and the main API in Europe.
Resolution: The incident was definitively resolved that same evening at 10:11 p.m. (UTC+2) with no data loss
-------------------
VERSION FRANCAISE
20:42 (UTC+2) Les backs office de WeezTicket (Ticketing) et WeezPay (Cashless) ainsi que les widgets de paiement en ligne ne sont plus accessibles.
Nos équipes sont pleinement mobilisées pour identifier l’origine de cet incident et rétablir le fonctionnement complet du service.
20:47 (UTC+2) Le CDN (Content Delivery Network) Bunny.net utilisé par Weezevent et 1,5M de sites dans le monde semble rencontrer des difficultés à l’origine de l’incident. Le switch automatique vers Cloud Front, le CDN de backup de Weezevent est en cours.
20:55 (UTC+2) Les backs offices et widgets de paiement en ligne sont de nouveaux pleinement accessibles, avec de minimes perturbations sur des fonctions non critiques.
21:15 (UTC+2) L’incident est résolu. Aucune donnée n’a été perdue et l’incident n’a pas impacté les opérations sur site. Seule la mise en place de nouvelles configurations, le suivi des ventes en temps réel et les rechargements en ligne n »étaient pas disponibles durant 17 minutes.
Nous continuons à surveiller attentivement le service afin d'en garantir sa stabilité et nous excusons pour la gêne occasionnée.
Post-mortem de Bunny.net
Cause : Un problème de connectivité temporaire chez l'un de leurs fournisseurs en amont (upstream provider) entre 20h34 et 20h57 (UTC+2).
Impact : Des perturbations d'accès au tableau de bord, aux services de stockage (Storage) et à l'API principale en Europe.
Résolution : L'incident a définitivement été résolu le soir même à 22h11 (UTC+2) sans qu'aucune perte de données ne soit à déplorer.
Jun 27, 20:30 CEST