محاكاة الحوادث
خروج

INC-3518 · P1

Zellige Market: 45 % من العملاء يرون «503» عند الدفع، لكن كل لوحات القيادة خضراء

الدار البيضاء · مشروع GCP zm-prod-boutique · Zellige Market · 11:20

Zellige Market (سوق إلكترونية للصناعة التقليدية، 1,2 مليون حساب) تخدم www.zellige-market.ma من عنقودَي GKE ضمن أسطول (Fleet) واحد:

  • gke-ew1 (europe-west1، بلجيكا) — وهو أيضًا عنقود الإعداد (config cluster) الخاص بـ الـ Gateway متعدد العناقيد boutique-gw؛
  • gke-mad (europe-southwest1، مدريد) — المنطقة الأقرب إلى المغرب وإسبانيا.

يرسل الـ load balancer العام كل عميل نحو المنطقة السليمة الأقرب. ولكل منطقة ذاكرتها المؤقتة للجلسات والسلال Memorystore؛ والـ API boutique-api تعرض /healthz/live (العملية حية) و/healthz/ready (Redis والقاعدة يجيبان).

منذ 10:40، يغرق الدعم تحت «erreur 503 au paiement»، وكلها تقريبًا من المغرب وإسبانيا. عند 11:02، «حوّل» Karim، من فريق المنصة، «مدريد» بجعل سعة الـ backends الخاصة بها 0 في الـ console: نجح الأمر… ثلاث دقائق. والبيع الخاطف عند الظهر أُعلن عنه لـ 400 000 مشترك.

أنت على حاسوب المناوبة (gcloud، المشروع zm-prod-boutique). العناقيد خاصة: تُدار من bastion-ew1 وbastion-mad (IAP)، حيث kubectl مضبوط.

هذه المحاكاة مخصّصة للمسجَّلين في أحد التكوينات.

مسجَّل من قبل؟ سجِّل الدخول.