Simulations d’incidents
Quitter

INC-3570 · P1

boutique.masterlinux.lab change d'adresse toutes les minutes, et l'API de paiement disparaît par moments

Casablanca · AKS francecentral + GKE europe-west9 · boutique MasterLinux · mardi 10:20

La boutique MasterLinux tourne en production sur AKS (aks-boutique-prod, francecentral). Ses noms publics sont dans la zone Azure DNS masterlinux.lab (groupe rg-dns) et sont tenus à jour automatiquement par external-dns à partir des Ingress : boutique, api et paiement.

La semaine dernière (13/10), l'équipe plateforme a monté un second cluster GKE (gke-boutique-prod, europe-west9) pour préparer le passage en multi-cloud : la boutique y est déployée en préversion (tests de charge, sans la base de production), avec les mêmes manifestes et les mêmes valeurs Helm pour external-dns, recopiées depuis AKS. Ce matin à 09:57, l'équipe cloud a enfin donné au compte de service d'external-dns GKE les droits d'écriture sur la zone Azure DNS, « pour que tout soit prêt ».

Depuis 10:00 : boutique.masterlinux.lab répond tantôt avec l'adresse d'AKS, tantôt avec celle de GKE (la préversion, sans paniers ni comptes), tantôt NXDOMAIN ; api et paiement disparaissent puis réapparaissent. Environ un paiement sur trois échoue.

Vous êtes sur le bastion ml-bastion (ops) : kubectl (contexte AKS par défaut) et az. Le plan de contrôle GKE est privé : on l'administre depuis la VM ml-admin-gke (ssh admin@ml-admin-gke), qui a kubectl, helm et gcloud.

Cette simulation fait partie d’un pack de simulations de production.

Débloquez toutes les simulations de production

AWS, Azure, Google Cloud, on-premise et multi-cloud, du niveau Débutant à Extrême : les vrais incidents des ESN et des grandes sociétés IT, accessibles pendant un an.

Essayer d’abord la simulation de démonstration gratuite

Déjà inscrit ? Connectez-vous.