Apache Airflow #13 : Airflow Sensors - Tout Comprendre pour Maîtriser tes Pipelines
NetSecDev
0:00 / 0:00
Apache Airflow #13 : Airflow Sensors - Tout Comprendre pour Maîtriser tes Pipelines
458 просмотров · 1 год назад
NetSecDev
1,06 тыс. подписчиков
458 просмотров · 1 год назад
🧭 Sommaire :
0:00 – Introduction & Définition
2:10 – FileSensor : attendre un export firewall
13:48 – ExternalTaskSensor : synchroniser deux DAGs
33:10 – HttpSensor : tester une API sécurité
51:23 – Défi bonus
54:45 – Synthèse & conclusion
🚀 Tu veux des workflows Airflow plus fiables, plus propres et plus intelligents ? Cette masterclass est pour toi.
Aujourd’hui, on démonte les Sensors dans Apache Airflow : FileSensor, HttpSensor, ExternalTaskSensor et comment ils transforment ton orchestration.
Ce que tu vas apprendre :
📁 Attendre un fichier log sans gaspiller de ressources
🔄 Synchroniser plusieurs DAGs de sécurité sans galère
🌐 Vérifier qu’une API est en ligne avant d’envoyer des alertes
🧠 Créer un timeout dynamique basé sur l'heure de la journée
Le tout avec du code clair, des cas concrets, et un défi final pour tester tes skills.