Перейти к содержимому

Полный курс по Trino для Data Engineer: Разбор от А до Я (теория + практика)

Корсаков о Data

0:00 / 0:00

Полный курс по Trino для Data Engineer: Разбор от А до Я (теория + практика)

2 001 просмотр · 5 месяцев назад
Корсаков о Data
2,39 тыс. подписчиков
2 001 просмотр · 5 месяцев назад
🔥 Хочешь понять, что такое Trino (ex-PrestoSQL), как с его помощью делать федеративные запросы к разным источникам данных одновременно и почему его так любят в Data Engineering? В этом видео разберём Trino с нуля на живых примерах: от локального запуска в Docker до полноценной интеграции с PostgreSQL, Apache Kafka, Apache Iceberg, Airflow и Superset. 🗂️ GitHub репозиторий с кодом: https://github.com/k0rsakov/pet_proje... ✉️ Вопросы, обучение, консультации по Data Engineering — пиши в личку: https://korsak0v.notion.site/Data-Eng... 💥 Аналог Notion (если не работает ссылка выше) — https://www.dataengineers.pro/mentors... 💡 В конце видео — практические рекомендации: разбираем специфику и тонкости работы с Trino, чтобы вы могли эффективно использовать его для аналитики и избегать популярных ошибок при проектировании Data-платформы. Ссылки: Менторство/консультации по Data Engineering — https://korsak0v.notion.site/Data-Eng... TG-канал — https://t.me/DataLikeQWERTY Instagram —   / i__korsakov   Habr — https://habr.com/ru/users/k0rsakov/pu... Таймкоды: 00:00 — начало 00:52 — Теория по Trino 04:31 — Простой запуск Trino в Docker без конфигурации 06:35 — Простой запуск Trino в Docker c использованием конфигурации 08:00 — Простой запуск Trino в Docker c использованием конфигурации и своего коннектора 10:56 — Простой запуск Trino cluster в Docker 16:59 — Простой федеративный запрос в Trino в Docker 20:31 — Интеграция Trino в дата-инженерию: Python 25:28 — Интеграция Trino в дата-инженерию: Kafka 29:42 — Интеграция Trino в дата-инженерию: Apache Iceberg 33:30 — Интеграция Trino в дата-инженерию: Apache Airflow 39:55 — Интеграция Trino в дата-инженерию: Apache Superset 46:20 — Тонкости Trino и заключение #trino #presto #dataengineering #bigdata #apacheairflow #superset #apachekafka #apacheiceberg #python #sql #etl #elt #dwh #dataengineer #junior #middle #pipeline