Simulations d’incidents
Quitter

INC-3518 · P1

Zellige Market : 45 % des clients voient « 503 » au paiement, mais tous les tableaux de bord sont verts

Casablanca · projet GCP zm-prod-boutique · Zellige Market · 11:20

Zellige Market (marketplace d'artisanat, 1,2 million de comptes) sert www.zellige-market.ma depuis deux clusters GKE d'un même parc (Fleet) :

  • gke-ew1 (europe-west1, Belgique) — c'est aussi le cluster de configuration du multi-cluster Gateway boutique-gw ;
  • gke-mad (europe-southwest1, Madrid) — la région la plus proche du Maroc et de l'Espagne.

Le load balancer global envoie chaque client vers la région saine la plus proche. Chaque région a son cache de sessions et de paniers Memorystore ; l'API boutique-api expose /healthz/live (le processus vit) et /healthz/ready (Redis et la base répondent).

Depuis 10:40, le support croule sous les « erreur 503 au paiement », presque tous depuis le Maroc et l'Espagne. À 11:02, Karim, de l'équipe plateforme, a « basculé Madrid » en mettant la capacité de ses backends à 0 dans la console : ça a marché… trois minutes. La vente flash de midi a été annoncée à 400 000 abonnés.

Vous êtes sur le poste d'astreinte (gcloud, projet zm-prod-boutique). Les clusters sont privés : on les pilote depuis bastion-ew1 et bastion-mad (IAP), où kubectl est configuré.

Cette simulation est réservée aux élèves inscrits à une formation.

Déjà inscrit ? Connectez-vous.