عند وقوع حادث في مركز البيانات، ليست الأولوية الأولى تحديد المسؤول أو كتابة التقرير النهائي. الهدف الفوري هو حماية الأشخاص واستقرار المنشأة والمحافظة على الخدمات الحرجة ومنع تصاعد الحدث. يأتي التحليل بعد السيطرة.
الكشف والتصنيف
قد يتم اكتشاف الحوادث عبر BMS أو EPMS أو DCIM أو الأمن أو بلاغات العملاء أو الملاحظة المباشرة. يجب تصنيف الحدث بسرعة حسب السلامة وأثر العملاء وفقد التكرارية والمدة المتوقعة.
حقق الاستقرار أولاً
يجب اتباع EOP المناسب وتنفيذ الإجراءات اللازمة للوصول إلى حالة مستقرة فقط. في الأحداث المعقدة قد تحول عمليات تحويل غير ضرورية مشكلة محدودة إلى انقطاع أكبر.
ينبغي أن يقود شخص واحد الاستجابة حتى لا تتخذ الفرق إجراءات متعارضة.
أنشئ خطاً زمنياً للحادث
تعد التوقيتات الدقيقة من EPMS وBMS وUPS والمولدات وسجلات الشبكة وملاحظات المشغلين أساسية. يجب التمييز بين الحدث الابتدائي والنتائج اللاحقة.
فمثلاً قد يكون إنذار بطارية UPS بعد فقد الكهرباء نتيجة متوقعة وليس السبب.
حافظ على الأدلة
لا تقم بReset أو مسح السجلات أو الكتابة فوق Trends بلا داعٍ قبل حفظ الأدلة. قد تكون Screenshots وسجلات الإنذار وWaveforms وأحداث Relays وسجلات المعدات مهمة للتحقيق.
الاتصال
يجب أن تكون رسائل الحادث واقعية ومؤرخة. افصل الحقائق المؤكدة عن الافتراضات. الرسائل المبكرة يجب أن تذكر الأثر المعروف والحالة الحالية ووقت التحديث التالي دون تخمين السبب الجذري.
تحليل السبب الجذري
السبب الجذري ليس دائماً أول قطعة تعطلت. يجب السؤال لماذا أدى الفشل إلى الأثر الذي حدث وأي حواجز كانت مفقودة أو فشلت. قد تشمل العوامل التصميم والصيانة والإجراءات والإنذارات والتدريب والتوثيق والعوامل البشرية.
الإجراءات التصحيحية والوقائية
يجب أن تعالج الإجراءات السبب والظروف التي سمحت بتصاعد الحدث. قد يتم استبدال مضخة معطلة، لكن الإجراءات الأعمق قد تشمل تحسين التكرارية أو المراقبة أو الصيانة أو تحديث EOP.
تابع الإجراءات حتى الإغلاق
- تعيين مسؤول.
- تحديد تاريخ إنجاز.
- تعريف دليل الإكمال.
- التحقق من فعالية الإجراء.
- تحديث الإجراءات والتدريب.
- مشاركة الدروس مع الفرق المعنية.
Near Miss مهم
يكشف Near Miss نقاط الضعف دون أثر على العميل، ولذلك يجب التحقيق فيه بما يكفي لمنع تحوله إلى انقطاع فعلي في المستقبل.
الارتباط باستمرارية الأعمال
يوفر ISO 22301:2019 إطاراً لنظام إدارة استمرارية الأعمال. يجب أن تغذي دروس الحوادث خطط الاستمرارية واستراتيجيات الاستجابة والتعافي عند الحاجة.
الخلاصة
الإدارة الجيدة للحوادث تفصل بين الاستقرار والتحقيق. أولاً سيطر على الحدث، ثم احفظ الأدلة وأعد بناء التسلسل وحدد الأسباب الجذرية والمساهمة وتابع الإجراءات حتى إثبات فعاليتها. هدف RCA هو منع التكرار وليس توزيع اللوم.
المراجع وقراءات إضافية
- ISO/IEC TS 22237-7:2018، إدارة وتشغيل مراكز البيانات.
- ISO 22301:2019 والتعديل 1:2024، أنظمة إدارة استمرارية الأعمال.
