لم يعد متجر MasterLinux قادرًا على حجز المخزون: كل الطلبيات عالقة «قيد الانتظار» منذ الليل

يبيع متجر MasterLinux عبر الإنترنت عُدد المختبرات والكتب وقسائم الشهادات الخاصة بالمدرسة. تمرّ كل طلبية عبر الواجهة ml-commandes-01، التي تحجز المخزون لدى الواجهة الداخلية api.stock.interne.masterlinux.lab قبل تأكيد الدفع. وعند الفشل، تعود الطلبية إلى طابور SQS commandes-a-reserver لتُعاد محاولتها.

يُنشر الاسم api.stock.interne.masterlinux.lab في منطقة Route 53 خاصة بواسطة أتمتة DNS داخلية:

• مُخطِّط (ml-dnsplan-01) يراقب النسخ السليمة لخدمة المخزون وينتج خططًا مرقّمة (أجيالًا) تُودَع في الحاوية S3 masterlinux-dnsauto-plans؛
• مُطبِّقان مستقلان، ml-dnsauto-01 (المنطقة eu-west-3a) و ml-dnsauto-02 (المنطقة eu-west-3b)، يطبّقان كل خطة جديدة في Route 53؛
• مُنظِّف (على ml-dnsauto-02) يحذف كل 5 دقائق الخطط القديمة جدًا والسجلات التي تملكها.

الليلة الماضية، بين 02:50 و 03:08، استبدل فريق المخزون تدريجيًا نسخ واجهة المخزون (إصدار جديد). عند 06:50، أبلغت خدمة العملاء أن أي طلبية لم تعد تُؤكَّد؛ وتجاوز الطابور 48000 رسالة وبدأ أوائل العملاء في الإلغاء. تريد الإدارة إعادة الخدمة قبل فتح المتاجر عند 09:00، وتريد خصوصًا الفهم حتى لا يتكرر ذلك.

أنت على ml-bastion (AWS CLI v2، المنطقة eu-west-3)، مع وصول SSH إلى ml-commandes-01 و ml-dnsauto-01 و ml-dnsauto-02.