Deixe o AIRFLOW decidir como solucionar o problema em seu pipeline
André Santana
0:00 / 0:00
Deixe o AIRFLOW decidir como solucionar o problema em seu pipeline
21 просмотр · 2 недели назад
André Santana
21 просмотр · 2 недели назад
Neste vídeo vamos entender como aplicar as retry polices plugáveis do Ariflow 3. Uma maneira elegante e simples de permitir que as suas tasks tomem as ações corretas dependendo do problema que ocorreu.
Conheça também a Common AI provider, que permite plugar um LLM para que ela tome a decisão de qual ação tomar, caso ocorra um erro em sua task.
Documentação das retry polices: https://airflow.apache.org/docs/apach...
https://airflow.apache.org/docs/apach...
Código de exemplo de implementação: https://drive.google.com/file/d/1ibrf...
#EngenhariaDeDados #SoftwareEngineering #Automacao #desenvolvimentodesoftware #python #apacheairflow #datapipeline #dataengineering #ciênciadedados #engenhariadedados #datascience #resiliencia #keyfeatures #etltools #tools #newversion #retry #exceptionhandling