Tous les paniers et toutes les sessions de la boutique ont disparu cette nuit

La boutique MasterLinux garde les sessions des clients et leurs paniers dans Redis : un maître ml-redis-01 et deux répliques ml-redis-02 et ml-redis-03, surveillés par trois Sentinel (un par nœud). L'application ne lit et n'écrit que sur le maître désigné par Sentinel.

Ce matin, le service client croule sous les messages : tous les clients ont été déconnectés et les paniers sont vides, y compris ceux préparés hier soir pour la promotion de 09:00. Le graphe du nombre de clés montre une chute verticale de 2,1 millions à 0 à 03:02. Aucune alerte n'a sonné : tous les nœuds répondent à PING et Sentinel n'a signalé aucune panne.

Une copie de nuit existe : chaque jour à 02:00, une tâche planifiée lance un BGSAVE sur une réplique et copie le fichier dans /sauvegardes/redis (partage NFS de ml-backup-01, monté sur les trois nœuds).

Vous êtes connecté en ops sur ml-redis-01, avec sudo. Comprenez ce qui s'est passé, restaurez les données avant la promotion, et faites en sorte que cela ne se reproduise pas.