Полный курс по Trino для Data Engineer: Разбор от А до Я (теория + практика)
Корсаков о Data
0:00 / 0:00
Полный курс по Trino для Data Engineer: Разбор от А до Я (теория + практика)
2 001 просмотр · 5 месяцев назад
Корсаков о Data
2,39 тыс. подписчиков
2 001 просмотр · 5 месяцев назад
🔥 Хочешь понять, что такое Trino (ex-PrestoSQL), как с его помощью делать федеративные запросы к разным источникам данных одновременно и почему его так любят в Data Engineering? В этом видео разберём Trino с нуля на живых примерах: от локального запуска в Docker до полноценной интеграции с PostgreSQL, Apache Kafka, Apache Iceberg, Airflow и Superset.
🗂️ GitHub репозиторий с кодом: https://github.com/k0rsakov/pet_proje...
✉️ Вопросы, обучение, консультации по Data Engineering — пиши в личку: https://korsak0v.notion.site/Data-Eng...
💥 Аналог Notion (если не работает ссылка выше) — https://www.dataengineers.pro/mentors...
💡 В конце видео — практические рекомендации: разбираем специфику и тонкости работы с Trino, чтобы вы могли эффективно использовать его для аналитики и избегать популярных ошибок при проектировании Data-платформы.
Ссылки: Менторство/консультации по Data Engineering — https://korsak0v.notion.site/Data-Eng...
TG-канал — https://t.me/DataLikeQWERTY
Instagram — / i__korsakov
Habr — https://habr.com/ru/users/k0rsakov/pu...
Таймкоды:
00:00 — начало
00:52 — Теория по Trino
04:31 — Простой запуск Trino в Docker без конфигурации
06:35 — Простой запуск Trino в Docker c использованием конфигурации
08:00 — Простой запуск Trino в Docker c использованием конфигурации и своего коннектора
10:56 — Простой запуск Trino cluster в Docker
16:59 — Простой федеративный запрос в Trino в Docker
20:31 — Интеграция Trino в дата-инженерию: Python
25:28 — Интеграция Trino в дата-инженерию: Kafka
29:42 — Интеграция Trino в дата-инженерию: Apache Iceberg
33:30 — Интеграция Trino в дата-инженерию: Apache Airflow
39:55 — Интеграция Trino в дата-инженерию: Apache Superset
46:20 — Тонкости Trino и заключение
#trino #presto #dataengineering #bigdata #apacheairflow #superset #apachekafka #apacheiceberg #python #sql #etl #elt #dwh #dataengineer #junior #middle #pipeline