التنبيهات والإشعارات
يمثّل التنبيه في Excubius شرطًا واحدًا على مورد واحد، من لحظة اكتشافه حتى زواله. يحتفظ Excubius بتنبيه واحد لكل شرط مهما تكرر إطلاقه، ويجمع التنبيهات تحت سبب جذري عندما يفسّر عطل واحد غيره، ولا يرسل رسالة إلا عندما يكون لديه جديد يقوله. تشرح هذه المقالة دورة حياة التنبيه والقواعد التي تحدد هل يُرسَل إشعار ومتى وإلى أين.
من النتيجة إلى الرسالة
لا تنتظر المراقبة Slack أبدًا: تُحفظ النتائج وتُقيَّم أولًا، ثم تخرج الرسائل مباشرة بعد ذلك ومن عملية مسح في الخلفية كل 15 ثانية.
دورة حياة التنبيه
| الحالة | المعنى |
|---|---|
| Open | الشرط قائم ولم يؤكده أحد |
| Acknowledged | هناك من يتولى أمره. يُسجَّل اسمه والوقت |
| Silenced | تنتظر الإشعارات حتى وقت اختاره أحدهم، من دقيقة واحدة إلى 30 يومًا. وعند انتهاء الوقت يعود التنبيه إلى Open |
| Resolved | انتهى الشرط. لا تقبل التنبيهات المحلولة أي إجراءات أخرى وتبقى في السجل |
يُحَلّ التنبيه من تلقاء نفسه عندما يتعافى الفحص، أو عندما يغلقه المصدر، أو عندما يختفي الشيء الذي كان يقيسه (قاعدة بيانات حُذفت مثلًا)، أو، في حالة تنبيه Cannot reach، عندما يستجيب المورد من جديد. ويمكن لعامل التشغيل أيضًا أن يحلّه يدويًا مع ملاحظة؛ وإذا كان الشرط ما زال قائمًا، يفتح تشغيل الفحص التالي تنبيهًا جديدًا. وعندما تصل تذكرة Jira المرتبطة بتنبيه حدث، مثل تجاوز الفشل، إلى حالة مكتملة، يُحَلّ التنبيه أيضًا.
يضم صندوق الوارد كذلك الاكتشافات الأمنية، التي يمكن قبولها كمخاطرة، والإشعارات الاستشارية الصادرة عن وحدة التحديثات. وهي تتبع دورة الحياة نفسها، مع الفروق الموضحة في الوضع الأمني.
تنبيه واحد لكل شرط
يحدد Excubius الشرط بثلاثة أشياء: المورد والفحص وتسميات الفحص، مثل اسم قاعدة البيانات أو نوع الانتظار. وتشكّل معًا بصمة التنبيه (fingerprint). ما دام الشرط قائمًا، تحدّث كل نتيجة جديدة التنبيه نفسه: تتبع قيمته آخر تشغيل ويزداد عدّاد مرات الحدوث. والعنوان هو اسم الفحص يليه قيم التسميات، مثل Last full backup age — Sales.
عندما يزول الشرط ثم يعود لاحقًا، يُفتح تنبيه جديد بالبصمة نفسها، فيحتفظ السجل بكل حلقة. أما التنبيهات الصادرة عن مصدر، مثل مشكلة في New Relic أو قاعدة تنبيه في Azure Monitor، فتُحفظ كتنبيه واحد لكل قاعدة مزوّد ومورد، مهما تكرر إطلاقها من المزوّد.
التصعيد والتذكيرات
- عندما يتحول التحذير إلى حالة حرجة، يُصعَّد التنبيه: يُسجَّل التغيير في خطه الزمني وتُبلَّغ القناة فورًا.
- عندما يخفّ التنبيه الحرج إلى تحذير، يُسجَّل التغيير ولا يُرسَل.
- تذكّرك فحوص انتهاء الصلاحية قبل الموعد النهائي: تحذير قبل 30 يومًا، وتذكير عند 14 يومًا، وحالة حرجة عند 7 أيام.
التصعيد بحسب الوقت، مثل إشعار قناة أخرى عندما لا يؤكد أحد تنبيهًا حرجًا خلال 15 دقيقة، غير متاح بعد. اليوم يصل التنبيه إلى قنوات كيانه مرة واحدة، إضافة إلى التصعيدات والتذكيرات وحله.
السبب الجذري: Cannot reach
عندما يفشل المُجمِّع في الاتصال بمورد ثلاث مرات متتالية لأنه لا يمكن الوصول إليه أو لأنه يرفض تسجيل الدخول أو لانتهاء المهلة، يفتح Excubius تنبيهًا حرجًا واحدًا من نوع Cannot reach لذلك المورد. يسرد التنبيه الفحوص التي لا تستطيع الاتصال وعدد الإخفاقات لدى كل منها.
يصبح كل تنبيه آخر للمورد، سواء كان مفتوحًا بالفعل أو فُتح أثناء تعذّر الوصول إلى المورد، تابعًا لذلك التنبيه. تعرض لوحة تفاصيل التابع Caused by، ويعرض السبب الجذري عدد التنبيهات التي تعتمد عليه. لا تُرسَل إشعارات عن التوابع ما دام السبب الجذري مفتوحًا، فيتلقى الفريق رسالة واحدة بدلًا من رسالة لكل فحص. ويُحَلّ السبب الجذري من تلقاء نفسه عندما لا يفشل أي فحص في الاتصال.
متى تُرسَل الرسالة
| اللحظة | الرسالة |
|---|---|
| يُفتح تنبيه | نعم، إلى كل قناة يبلغ التنبيه حدها الأدنى للخطورة |
| ترتفع خطورته | نعم، حتى أثناء فترة الهدوء |
| يوم تذكير في فحص انتهاء الصلاحية | نعم |
| يُحَلّ | فقط إذا كان فتحه قد أُعلن |
| يتكرر أو يخفّ أو يُؤكَّد | لا؛ يُسجَّل التغيير في الخط الزمني |
تحمل كل رسالة المورد ومسار كيانه، والفحص، والقيمة مقابل الحد ومصدر ذلك الحد، ومنذ متى، والإجراء المقترح من الكتالوج، ورابطًا إلى التنبيه. ولا تذكر الرسائل اسم المنتج أبدًا، فيحتفظ التثبيت الذي يستخدم علامته التجارية الخاصة بها.
فترة الهدوء. يرسل Excubius رسالة واحدة على الأكثر لكل شرط كل 10 دقائق، ما لم ترتفع الخطورة. والشرط الذي يُحَلّ ثم يعود خلال تلك المدة لا يُعلَن مرتين. وإذا كانت رسالة محتجزة ما زالت سارية عند انتهاء الفترة، ترسلها عملية مسح لاحقة. ويمكن للمسؤول تغيير المدة للخادم كله.
حالات التسليم الفاشلة. تُسجَّل الرسالة التي يرفضها Slack في الخط الزمني للتنبيه وتعيد عمليات المسح التالية محاولتها، بثلاث محاولات في المجموع.
الكتم ونوافذ الصيانة
كلاهما يُبقي القناة هادئة. ويختلفان فيما يغطيانه وفي كيفية بدايتهما.
| الكتم | نافذة الصيانة | |
|---|---|---|
| ما يغطيه | تنبيه واحد موجود | كيان كامل، أو بعض الموارد وما اكتُشف تحتها، بما في ذلك التنبيهات التي لم توجد بعد |
| من يبدؤه | عامل التشغيل، من التنبيه | عامل التشغيل، من Settings › Maintenance windows |
| مدته | ساعة واحدة أو 4 ساعات أو يوم واحد، أو من دقيقة واحدة إلى 30 يومًا | الآن لمدة محددة؛ أو مرة واحدة؛ أو كل أسبوع |
| أثناءه | لا يُرسَل شيء عن التنبيه سوى حله | لا يُرسَل شيء عن الموارد المشمولة. وتعرض الحالة قيد الصيانة |
| عند انتهائه | يعود التنبيه إلى Open، ويصدر كل ما لم تعلم به القناة بعد، مثل التصعيد | تُعلَن التنبيهات التي ما زالت مفتوحة. أما التنبيهات التي فُتحت وزالت داخل النافذة فلا تُعلَن أبدًا |
في الحالتين تستمر الفحوص في العمل ويبقى السجل كاملًا. استخدم الكتم عندما تعرف سبب تنبيه واحد وتحتاج إلى الهدوء أثناء إصلاحه. واستخدم نافذة صيانة للأعمال المخطط لها.
كيف تجد الرسالة قناتها
قنوات الإشعارات هي قنوات Slack المعيَّنة على الكيانات. يذهب التنبيه إلى القنوات المفعَّلة لـأقرب كيان له قنوات، بالصعود في الشجرة من كيان التنبيه. ويرث الكيان قنوات أسلافه إلى أن يعرّف قنواته الخاصة.
- لكل قناة خطورة دنيا، هي Info أو Warning أو Critical، ولغة للرسائل، الإنجليزية أو الإسبانية عندما يوفّر التثبيت لغات. ولا تُنشر هناك التنبيهات التي تقل عن الحد الأدنى.
- عندما لا يكون لأي كيان على المسار قناة، تتلقى قناة الخادم الافتراضية، إن حدد المسؤول واحدة، التحذيرات والتنبيهات الحرجة.
- تعرض Settings › Notifications، لأي كيان، Where alerts go: قنواته الخاصة أو الموروثة.