ساهمت أنظمة الأمان الخاصة بشركة مايكروسوفت في تحول خلل برمجي خامد إلى انقطاع عالمي في خدمة "أوتلوك" (Outlook) الأسبوع الماضي، وذلك عبر إعادة توجيه حركة المرور من الخوادم المعطلة إلى خوادم سليمة كانت تعاني من نفس المشكلة، إلى أن توقف أكثر من 80% من الخوادم الواقعة ضمن بوابة شبكات "مايكروسوفت 365" (Microsoft 365) عن الاستجابة.
وتُعرف هذه الظاهرة باسم "الفشل المتسقلسل" أو "الفشل المتتابع"، وهي إحدى النتائج التي وردت في التقرير الأولي لشركة مايكروسوفت بشأن العطل، والذي نُشر ليلًا لتحليل أسباب الخلل الذي أدى إلى قطع خدمة البريد الإلكتروني عن الأفراد والمؤسسات في أكثر من 70 دولة حول العالم.
ووفقاً للتقرير، ازدادت محاولات التعافي تعقيداً بسبب مشكلة ثانية؛ حيث تعرضت الخوادم التي أعاد المهندسون تشغيلها لضغط هائل وفوري من حركة المرور المنتظرة، مما أدى إلى توقفها عن الاستجابة مرة أخرى، وهي ظاهرة تُعرف باسم "القطيع المندفع".
وأشارت مايكروسوفت إلى أن اضطرابات الخدمة الفعلية استمرت ما يقرب من 24 ساعة، بينما استمر تسليم الرسائل الإلكترونية المتأخرة بعد عودة الخدمة صباح يوم الجمعة، ونشرت الشركة إعلان زوال العطل رسمياً على منصة "إكس" (X) في وقت متأخر من ليلة الجمعة، أي بعد نحو 38 ساعة من بدء الانقطاع.
ويعود الخلل الكامن إلى شهر يوليو الماضي، عندما بدأت مايكروسوفت في إطلاق تحديث إصلاحي للبرمجيات التي تدير الاتصالات الواردة على بوابة الشبكة الخاصة بها، وهي الخوادم التي تعمل أمام خدمات "أوتلوك" والعديد من خدمات "مايكروسوفت 365" الأخرى.
ولم توضح مايكروسوفت حتى الآن الهدف الأساسي من ذلك التحديث الإصلاحي، لكن التقرير أشار إلى أنه عمل على مستوى العالم لأكثر من ثلاثة أشهر دون تسجيل أي مشاكل تذكر.
ومع ذلك، وتحت الضغط الشديد، أصبحت أجزاء من تلك البرمجيات عالقة في انتظار بعضها البعض، مما استهلك طاقة المعالجة والذاكرة في الخوادم حتى تجمدت بالكامل.
وهذا تحديداً ما حدث الأسبوع الماضي؛ فقبل نحو 15 ساعة من الانقطاع، قامت أنظمة مايكروسوفت تلقائياً بنقل حركة مرور تطبيق "تيمز" (Teams) إلى نفس الخوادم التي تعالج رسائل البريد الإلكتروني لأوتلوك، مما زاد من العبء الملقى عليها، وفقاً للتقرير. ووصفَت مايكروسوفت هذا التبديل بأنه جزء من العمليات العادية، لكنها لم تذكر الأسباب التي دفعت إلى اجرائه.
ومما زاد الأمور تعقيداً، أن ما يقرب من 14% من سعة خوادم البوابة كانت خارج الخدمة بالفعل بسبب مشكلة أخرى غير مرتبطة بالعطل الأساسي، والتي لم يفصلها التقرير أيضاً.
وعندما بلغت حركة المرور ذروتها خلال ساعات العمل الرسمية في الولايات المتحدة، كان ذلك كافياً لإحداث الانقطاع الشامل.
وهناك جانبان رئيسيان يرجح أن يخضعا لتدقيق مكثف في الفترة المقبلة:
فشل اختبارات مايكروسوفت في رصد الخلل: اعتمدت مختبرات الشركة في الغالب على أجهزة أقل قوة تحتوي على عدد أقل من نوى المعالجة، وتشغل مزيجاً مختلفاً من حركة المرور، بينما ظهرت المشكلة بأشد صورها على الخوادم الأحدث التي تتعامل مع أحمال العملاء الحقيقية.
كما مر التحديث الإصلاحي عبر عملية طرح قياسية تدريجية خاصة بشركة مايكروسوفت، وانتشر عالمياً على مدار عدة أسابيع دون أي مؤشر على وجود مشاكل، بحسب ما جاء في التقرير.
ومن المؤكد أن الشركة تمتلك الإمكانيات الكافية للاختبار على الأجهزة الفعلية التي تشغل خدماتها؛ إذ أنفقت الشركة 45.2 مليار دولار على النفقات الرأسمالية في ربعها المالي الأخير، ذهب الجزء الأكبر منها لصالح البنية التحتية للذكاء الاصطناعي.
عدم صمود الضمانات المخصصة لاحتواء الضرر: انهارت الحواجز الفاصلة بين المناطق المختلفة بسبب ما أسماه التقرير "مشكلة منفصلة" لم يقدم لها شرحاً مفصلاً، مما أدى إلى تحول العطل إلى أزمة عالمية.
وتتألف البوابة من آلاف "وحدات السعة" المجمعة في مناطق مختلفة، وتفصل بينها حواجز تهدف إلى حصر أي عطل في مكانه المخصص. كما تشغل مايكروسوفت بوابة ثانية مستقلة لتمكين الخدمات من التحول إليها أثناء حالات الاضطراب.
وقد نجحت تطبيقات "تيمز" و"ون درايف" (OneDrive) و"شيربوينت" (SharePoint) وتطبيقات "أوفيس" في إجراء ذلك التحول، وهو ما يفسر استمرار عمل محادثات واجتماعات "تيمز" في الغالب، في حين تعذر على خدمة "إكستش" (Exchange) القيام بذلك "لأسباب تتعلق بالحجم" حسب تعبير الشركة، مما أدى إلى توقف البريد الإلكتروني.
وعلاوة على ذلك، ساهمت أدوات مايكروسوفت الذاتية في تفاقم المشكلة؛ فلم يتم تصميم نظام التعافي التلقائي الخاص بالشركة للتعامل مع أسطول من الخوادم المتوقفة عن الاستجابة بشكل شبه كامل، وفقاً للتقرير، كما عجزت وسائلها المعتادة في التراجع عن التحديثات الخاطئة عن إلغاء تغيير يعود تاريخه إلى أشهر مضت بشكل سريع.






