واجه عملاء خدمات "أوتلوك" (Outlook) و"تيمز" (Teams) ومنصة "مايكروسوفت 365" (Microsoft 365) عطلاً تقنياً واسع النطاق وطويل الأمد الأسبوع الماضي، امتد عبر يومي الخميس والجمعة، مما ترك ملايين المستخدمين حول العالم بلا إمكانية للوصول إلى البريد الإلكتروني وأدى إلى تعطل أنظمة الأعمال بشكل ملحوظ. وفي حين تستغرق الأعطال عادة بضع ساعات فقط، فإن عطل الأسبوع الماضي كان استثنائياً من حيث مدته واتساع نطاق الأنظمة التي أخرجها عن الخدمة.
شارك تشارلز لامانا، المسؤول التنفيذي لقطاع "كوبايلوت" والوكلاء والمنصات في شركة مايكروسوفت، المرحلة الأولى من تحليل تفاصيل الحادث في منشور على منصة إكس (X). وأوضح أن المشكلة ناجمة عن "ثلاثة عوامل رئيسية تضافرت لتتسبب في عطل عالمي ببوابة الشبكة التي تخدم العديد من خدمات مايكروسوفت 365".
نشأ العامل الأول من خلل تم إدخاله في شهر يوليو كجزء من عملية إصلاح لخوادم بوابة شبكة مايكروسوفت 365. وأشارت الشركة إلى أن البرمجيات، بما في ذلك هذا الخلل الخفي، تم تشغيلها واختبار أحمالها "عالمياً لعدة أسابيع" دون تسجيل أي تأثير سلبياً.
وقال لامانا: "لم تكتشف اختبارات التحميل العادية لدينا هذه المشكلة الكامنة بسبب اختلاف حركة المرور وتشكيلة وحدات المعالجة والعتاد المستخدمة في مختبرات الاختبار الخاصة بنا". وأوضح أن المشكلة تفاقمت "على الأجهزة التي تحتوي على عدد أكبر من النوى وعتاد أحدث"، بينما تركز اختبارات التحميل الداخلية لشركة مايكروسوفت عادةً على "وحدات عتادية أضعف وتحتوي على عدد أقل من النوى".
تمثل العامل الثاني في حدوث طفرة مفاجئة في الأحمال على بوابات الشبكة، والتي ارتبطت بمشكلة طفيفة واجهت تطبيق مايكروسوفت تيمز يوم الأربعاء 11 نوفمبر. دفعت تلك المشكلة نظام "تيمز" إلى التحول نحو بوابة شبكة بديلة، مما أدى إلى زيادة الأحمال وتغيير أنماط حركة المرور العامة. وعلق لامانا بالقول: "هذا النوع من التحويل الاحتياطي يعد جزءاً من العمليات العادية ويعتبر عنصراً أساسياً في جهود المرونة القياسية لشركة مايكروسوفت".
أما العامل الثالث فهو ما وصفه لامانا بأنه "مشكلة غير مرتبطة وقعت في اليوم السابق"، حيث خرجت 14% من السعة الخوادمية لبوابة شبكة مايكروسوفت عن الخدمة. وأدى اجتماع العاملين الثاني والثالث إلى مواجهة بوابة الشبكة للخلل الذي أُدخل لأول مرة في يوليو.
أدى ذلك إلى تراكم هائل في الطلبات، مما أسفر في النهاية عن توقف الخوادم عن الاستجابة، وذلك بالتزامن مع ما تسميه مايكروسوفت "نافذة الذروة لحركة المرور في الولايات المتحدة". بعد ذلك، قامت الأنظمة الآلية التابعة لمايكروسوفت بإعادة توجيه الطلبات، مما تسبب في تكرار الخلل عبر شبكتها والتأثير في النهاية على أكثر من 80% من خوادمها.
واختتم لامانا بالقول: "لم تكن عمليات الاستعادة الآلية المعتادة لدينا مصممة لاستعادة الخدمة من هذه الحالة الواسعة من عدم الاستجابة".
ولحل هذه المشكلات، طوّر المهندسون حلاً برمجياً وأخرجوا كل خادم على حدة من الخدمة لتطبيق التحديث. ثم قام المهندسون بإعادة تنشيط كل خادم بعناية فائقة، مما أدى إلى فترات انتظار طويلة وبالتالي استمرار انقطاع الخدمة عن عملاء مايكروسوفت لبعض الوقت.






