Перейти к содержимому

Apache Airflow #13 : Airflow Sensors - Tout Comprendre pour Maîtriser tes Pipelines

NetSecDev

0:00 / 0:00

Apache Airflow #13 : Airflow Sensors - Tout Comprendre pour Maîtriser tes Pipelines

458 просмотров · 1 год назад
NetSecDev
1,06 тыс. подписчиков
458 просмотров · 1 год назад
🧭 Sommaire : 0:00 – Introduction & Définition 2:10 – FileSensor : attendre un export firewall 13:48 – ExternalTaskSensor : synchroniser deux DAGs 33:10 – HttpSensor : tester une API sécurité 51:23 – Défi bonus 54:45 – Synthèse & conclusion 🚀 Tu veux des workflows Airflow plus fiables, plus propres et plus intelligents ? Cette masterclass est pour toi. Aujourd’hui, on démonte les Sensors dans Apache Airflow : FileSensor, HttpSensor, ExternalTaskSensor et comment ils transforment ton orchestration. Ce que tu vas apprendre : 📁 Attendre un fichier log sans gaspiller de ressources 🔄 Synchroniser plusieurs DAGs de sécurité sans galère 🌐 Vérifier qu’une API est en ligne avant d’envoyer des alertes 🧠 Créer un timeout dynamique basé sur l'heure de la journée Le tout avec du code clair, des cas concrets, et un défi final pour tester tes skills.