Sensor ждёт выполнения условия: появления файла, готовности данных или завершения внешней операции. После успеха зависимые задачи могут продолжить работу.
Что делает Sensor в Airflow?
Sensor ждёт выполнения условия: появления файла, готовности данных или завершения внешней операции. После успеха зависимые задачи могут продолжить работу.
Короткий ответ
Что ответить на собеседовании
Подробный разбор
Ответ с пояснениями
Sensor ждёт выполнения условия: появления файла, готовности данных или завершения внешней операции. После успеха зависимые задачи могут продолжить работу.
Длительное ожидание не должно зря удерживать worker: в зависимости от сенсора используют reschedule или deferrable execution. Настройте таймаут и интервал проверки. Сенсоры Airflow.