Alertas y notificaciones
En Excubius, una alerta representa una condición en un recurso, desde el momento en que se detecta hasta que desaparece. Excubius mantiene una sola alerta por condición sin importar cuántas veces se dispare, agrupa las alertas bajo una causa raíz cuando una falla explica otras y envía un mensaje solo cuando hay algo nuevo que decir. En este artículo se explica la vida de una alerta y las reglas que deciden si se envía una notificación, cuándo y adónde.
De un resultado a un mensaje
El monitoreo nunca espera a Slack: los resultados se guardan y se evalúan primero, y los mensajes salen justo después y desde un proceso en segundo plano que se ejecuta cada 15 segundos.
La vida de una alerta
| Estado | Significa |
|---|---|
| Abierta | La condición se mantiene y nadie la ha confirmado |
| Confirmada | Alguien se está ocupando de ella. Se registran su nombre y la hora |
| Silenciada | Las notificaciones esperan hasta la hora que alguien eligió, de 1 minuto a 30 días. Cuando se cumple el tiempo, la alerta vuelve a estar Abierta |
| Resuelta | La condición terminó. Las alertas resueltas ya no admiten acciones y quedan en el historial |
Una alerta se resuelve sola cuando la comprobación se recupera, cuando la fuente la cierra, cuando desaparece lo que medía (por ejemplo, una base de datos que se eliminó) o, en el caso de una alerta Sin conexión, cuando el recurso vuelve a responder. Un operador también puede resolverla a mano con una nota; si la condición todavía se mantiene, la siguiente ejecución de la comprobación abre una alerta nueva. Cuando un ticket de Jira de una alerta de evento, como una conmutación por error, llega a un estado de completado, la alerta también se resuelve.
La bandeja también contiene hallazgos de seguridad, que se pueden aceptar como riesgo, y avisos del módulo de actualizaciones. Siguen la misma vida, con las diferencias que se explican en Postura de seguridad.
Una alerta por condición
Excubius identifica una condición por tres cosas: el recurso, la comprobación y las etiquetas de la comprobación, como el nombre de la base de datos o el tipo de espera. Juntas forman la huella de la alerta. Mientras la condición se mantiene, cada resultado nuevo actualiza la misma alerta: su valor sigue la ejecución más reciente y su contador de ocurrencias aumenta. El título es el nombre de la comprobación seguido de los valores de las etiquetas, por ejemplo Last full backup age — Sales.
Cuando la condición desaparece y más tarde vuelve, se abre una alerta nueva con la misma huella, así el historial conserva cada episodio. Las alertas que vienen de una fuente, como una incidencia de New Relic o una regla de alertas de Azure Monitor, se mantienen como una sola alerta por regla del proveedor y por recurso, sin importar cuántas veces la genere el proveedor.
Escalado y recordatorios
- Cuando una advertencia pasa a crítica, la alerta escala: el cambio se registra en su historial y se avisa al canal de inmediato.
- Cuando una alerta crítica baja a advertencia, el cambio se registra pero no se envía.
- Las comprobaciones de vencimientos te avisan antes de la fecha límite: una advertencia 30 días antes, un recordatorio a los 14 días y una alerta crítica a los 7 días.
Todavía no está disponible el escalado por tiempo, como avisar a otro canal cuando nadie confirma una alerta crítica en 15 minutos. Hoy una alerta llega una vez a los canales de su entidad, además de sus escalados, recordatorios y su resolución.
Causa raíz: Sin conexión
Cuando el recolector no logra conectarse a un recurso tres veces seguidas porque no es accesible, rechaza el inicio de sesión o agota el tiempo de espera, Excubius abre una sola alerta crítica Sin conexión para ese recurso. La alerta enumera las comprobaciones que no logran conectarse y cuántas fallas lleva cada una.
Todas las demás alertas del recurso, las que ya estaban abiertas y las que se abran mientras el recurso no es accesible, pasan a ser dependientes de esa alerta. El panel de detalle de una dependiente muestra Causada por, y la causa raíz muestra cuántas alertas dependen de ella. Las dependientes no se notifican mientras la causa raíz está abierta, así el equipo recibe un solo mensaje en lugar de uno por comprobación. La causa raíz se resuelve sola cuando ya no hay ninguna comprobación que no logre conectarse.
Cuándo se envía un mensaje
| Momento | Mensaje |
|---|---|
| Se abre una alerta | Sí, a cada canal cuya severidad mínima alcanza |
| Su severidad sube | Sí, incluso durante el período de calma |
| Un día de recordatorio de una comprobación de vencimientos | Sí |
| Se resuelve | Solo si se anunció su apertura |
| Se repite, baja de severidad o se confirma | No; el cambio se registra en el historial |
Cada mensaje incluye el recurso y la ruta de su entidad, la comprobación, el valor frente al umbral y de dónde viene ese umbral, desde cuándo ocurre, la acción sugerida del catálogo y un enlace a la alerta. Los mensajes nunca nombran el producto, así una instalación que usa su propia marca la conserva.
Período de calma. Excubius envía como máximo un mensaje por condición cada 10 minutos, salvo que la severidad suba. Una condición que se resuelve y vuelve dentro de ese tiempo no se anuncia dos veces. Si un mensaje retenido todavía aplica cuando termina el período, un proceso posterior lo envía. Un administrador puede cambiar el período para todo el servidor.
Entregas fallidas. Un mensaje que Slack rechaza se registra en el historial de la alerta y lo reintentan los procesos siguientes, tres intentos en total.
Silencios y ventanas de mantenimiento
Ambos mantienen un canal en silencio. Se diferencian en lo que cubren y en cómo empiezan.
| Silencio | Ventana de mantenimiento | |
|---|---|---|
| Cubre | Una alerta existente | Una entidad completa, o algunos recursos y lo que se descubrió bajo ellos, incluidas las alertas que todavía no existen |
| Quién lo inicia | Un operador, desde la alerta | Un operador, desde Configuración › Ventanas de mantenimiento |
| Cuánto dura | 1 hora, 4 horas, 1 día, o de 1 minuto a 30 días | Desde ahora, por un tiempo determinado; una vez; o cada semana |
| Mientras dura | No se envía nada de la alerta, salvo su resolución | No se envía nada sobre los recursos cubiertos. Muestran En mantenimiento |
| Cuando termina | La alerta vuelve a estar Abierta, y sale todo lo que el canal todavía no recibió, como un escalado | Se anuncian las alertas que siguen abiertas. Las alertas que se abrieron y desaparecieron dentro de la ventana nunca se anuncian |
En ambos casos las comprobaciones siguen ejecutándose y el historial queda completo. Usa un silencio cuando conoces la causa de una alerta y necesitas que no lleguen mensajes mientras la corriges. Usa una ventana de mantenimiento para el trabajo planificado.
Cómo un mensaje encuentra su canal
Los canales de notificación son canales de Slack configurados en las entidades. Una alerta va a los canales habilitados de la entidad más cercana que tenga alguno, subiendo por el árbol desde la entidad de la alerta. Una entidad hereda los canales de sus antecesoras hasta que define los suyos.
- Cada canal tiene una severidad mínima, Información, Advertencia o Crítico, y un idioma de los mensajes, inglés o español cuando la instalación ofrece idiomas. Las alertas por debajo del mínimo no se publican ahí.
- Cuando ninguna entidad de la ruta tiene un canal, el canal predeterminado del servidor, si el administrador configuró uno, recibe las advertencias y las críticas.
- Configuración › Notificaciones muestra, para cualquier entidad, A dónde van las alertas: sus propios canales o los heredados.