Simulations d’incidents
Quitter

INC-3368 · P1

Les 60 serveurs de collecte d'événements redémarrent en boucle depuis 09:14

Rabat · datacenter MasterLinux de Technopolis · plateforme d'événements de l'école MasterLinux · 09:42

L'école MasterLinux collecte en temps réel les événements de ses plateformes (progression des élèves, validations de labs, clics) grâce au service evtfront : un cluster de serveurs Java sous RHEL 9 (ml-evt-01 à ml-evt-60). Chaque serveur maintient des connexions permanentes avec tous les autres pour se partager les flux.

Ce matin à 09:10, pour la rentrée, l'équipe a ajouté 6 nœuds (ml-evt-55 à ml-evt-60) : le cluster est passé de 54 à 60 serveurs. Depuis 09:14, les serveurs s'arrêtent les uns après les autres sur une erreur Java, systemd les relance, ils retombent. Plus aucune progression d'élève n'est enregistrée et les tableaux de bord pédagogiques sont vides. Les clients gardent les événements en tampon pendant 2 heures au maximum.

Vous êtes connecté en ops sur ml-evt-03 (un des anciens nœuds), avec sudo. Trouvez pourquoi le cluster ne tient plus, validez une correction sur ce nœud pilote : l'équipe la déploiera ensuite par vagues.

Cette simulation fait partie d’un pack de simulations de production.

Débloquez toutes les simulations de production

AWS, Azure, Google Cloud, on-premise et multi-cloud, du niveau Débutant à Extrême : les vrais incidents des ESN et des grandes sociétés IT, accessibles pendant un an.

Essayer d’abord la simulation de démonstration gratuite

Déjà inscrit ? Connectez-vous.