Panne de 40 minutes hier sur les réservations, et l'alarme 5xx n'a prévenu personne

Marsa Ferries (compagnie fictive de traversées Tanger Med – Algésiras) vend ses billets sur reservations.marsaferries.ma, derrière un Application Load Balancer.

Hier, de 14:10 à 14:50, le site a renvoyé des erreurs 502 (un problème applicatif depuis corrigé). Ce sont les clients, sur les réseaux sociaux, qui ont prévenu l'équipe. Or une alarme CloudWatch alb-5xx-reservations existe justement pour cela : elle doit envoyer un SMS et un e-mail à l'astreinte au-delà de 50 erreurs 5xx en 5 minutes.

La responsable d'exploitation vous demande de comprendre pourquoi l'alarme n'a rien dit, et de la réparer aujourd'hui.

Vous êtes sur votre poste avec l'AWS CLI v2 (région eu-west-1).