Azure Data Factory
El módulo de Azure Data Factory monitorea tus canalizaciones de datos: las ejecuciones de canalizaciones y de desencadenadores que fallan, las canalizaciones diarias que no cumplen su hora límite, las ejecuciones que tardan más de lo habitual y los entornos de ejecución de integración autohospedados de los que dependen. Cada factoría también recibe una tarjeta en la Vista general. Sus valores llegan de la fuente Azure Monitor, que los lee con un rol de solo lectura.
Qué monitorea
| Área | Comprobaciones | Por qué importa |
|---|---|---|
| Ejecuciones de canalizaciones | Ejecuciones fallidas en las últimas 24 horas | Una carga fallida deja los informes y los sistemas posteriores con datos desactualizados |
| Hora límite diaria | Canalizaciones con la anotación schedule:daily que no terminaron correctamente antes de las 06:00 | El negocio espera los datos al comienzo del día, sea cual sea la causa del retraso |
| Duración | La duración de cada canalización frente a su propio historial | Una ejecución que de pronto tarda mucho más suele ser la primera señal de un problema |
| Desencadenadores | Ejecuciones de desencadenadores que fallaron o se omitieron | Un desencadenador que no se activa significa una canalización que nunca se ejecuta |
| Entornos de ejecución de integración | Nodos de los entornos de ejecución de integración autohospedados en línea, y su versión frente a la última disponible | Un nodo sin conexión detiene todas las canalizaciones que llegan a datos locales |
La hora límite diaria usa los parámetros de la comprobación: deadline_local (06:00), timezone (America/New_York de manera predeterminada) y expected_pipelines_tag (schedule:daily). Cámbialos en la comprobación de tu factoría. Cada comprobación, con su regla, su causa y su acción, está en la referencia de las comprobaciones de Azure Data Factory.
La tarjeta de Data Factory
Cada factoría recibe una tarjeta en la Vista general con las ejecuciones de hoy (correctas, fallidas, en curso, canceladas), las ejecuciones fallidas y en curso, sus entornos de ejecución de integración con su estado, nodos, versión y la última disponible, y las próximas ejecuciones de desencadenadores calculadas a partir de los desencadenadores de programación, incluidos los de ventana de saltos de tamaño constante. Los desencadenadores de eventos no tienen próxima ejecución. Hoy empieza a medianoche en la Zona horaria de la fuente.
Antes de empezar
- La fuente Azure Monitor con Factorías de datos entre sus tipos de recursos y Ejecuciones de Data Factory seleccionado. Consulta Conectar Azure Monitor.
- Reader (
acdd72a7-3385-48ef-bd42-f606fba81ae7) en las suscripciones, para las factorías. - El rol personalizado Data Factory run reader en las factorías o en sus grupos de recursos. Data Factory expone el historial de ejecuciones como acciones que Reader no incluye, y el rol integrado Data Factory Contributor agregaría acceso de escritura. La definición del rol y los comandos para asignarlo están en Un rol de solo lectura para Data Factory.
- El módulo está activado. La función
monitoring.azurecubre este módulo y el módulo de Azure.
Agregar un recurso
No agregas factorías a mano. La fuente Azure Monitor las enumera y las agrega debajo de su entidad, con sus comprobaciones y su tarjeta. Sin el rol personalizado, las factorías aparecen igual, y el botón Probar de la fuente indica Data Factory como un permiso opcional que falló.