Airflow с Kubernetes Executor | Запуск в многоузловом кластере k8s | Пошаговое руководство
MaxcoTec Learning
0:00 / 0:00
Airflow с Kubernetes Executor | Запуск в многоузловом кластере k8s | Пошаговое руководство
20 406 просмотров · 4 года назад
MaxcoTec Learning
3,31 тыс. подписчиков
20 406 просмотров · 4 года назад
ОБНОВЛЕНИЕ: Посмотрите, как развернуть более новую версию Airflow 3 в Kubernetes
• Apache Airflow 3 | Deploy on Kubernetes us...
Это пошаговое руководство по запуску Apache Airflow с исполнителями Kubernetes в многоузловом кластере Kubernetes. В этом видео мы рассмотрим:
1. Запустите многоузловой кластер Kubernetes на локальной машине с помощью KinD
2. Подготовьте Dockerfile для ваших DAG Airflow
3. Минимальный Helm-диаграмм, необходимый для запуска Airflow в Kubernetes с использованием Kubernetes Executor
Получить код:
https://github.com/maxcotec/airflow-o...
Разделы:
00:00 Введение и план
01:17 Исполнители Airflow в Kubernetes
02:45 Как Kubernetes запускает Airflow в многоузловом кластере
06:33 Настройка кластера Kubernetes с помощью KinD
10:08 Подготовка образа Docker Airflow
12:27 Helm-диаграмма Airflow для Kubernetes
20:40 Развертывание Airflow в Kubernetes
24:45 Тестирование DAG через веб-сервер Airflow
26:14 Итоги
27:22 Заключение
Узнайте что-нибудь новое ниже:
https://maxcotec.com/blog/pv-center-f...
https://maxcotec.com/blog/5-cool-tech...