Рабочий процесс ИИ для обработки данных
Kahan Data Solutions
0:00 / 0:00
Рабочий процесс ИИ для обработки данных
27 267 просмотров · 7 мес. назад
Kahan Data Solutions
60,5 тыс. подписчиков
27 267 просмотров · 7 мес. назад
Получите руководство для начинающих по современным данным (бесплатно): https://bit.ly/startermds
Сотрудничайте со мной для модернизации вашего хранилища данных: https://bit.ly/kdsconsulting
-----
В прошлые выходные я создал тестовый конвейер обработки данных от начала до конца менее чем за 24 часа.
При этом я не написал ни одной строчки кода.
Это был невероятный опыт, и именно поэтому сегодня я хочу поговорить об ИИ.
И, в частности, о том, как он применяется к нам в области инженерии данных.
Во-первых, я понимаю, что эта тема становится утомительной.
Но проблема в том, что многие специалисты по данным до сих пор ассоциируют «ИИ» просто с перепиской в ChatGPT.
Тем не менее, я также считаю, что очень сложно понять некоторые из последних новинок, пока не увидишь их в действии.
Поэтому в сегодняшнем видео я покажу вам пример того, как на самом деле выглядит новый рабочий процесс, управляемый ИИ, с использованием распространенных инструментов для работы с данными.
Это намеренно просто, но сделано таким образом, что, я считаю, всё равно донесёт суть.
Я расскажу вам:
Пример проекта, который я создал
Пошаговое описание внесения изменений в dbt с помощью кода Claude
Обсуждение дальнейших подходов к этому вопросу
Объяснение, почему реальный инженерный опыт сейчас ценится как никогда
Приятного просмотра!
Временные метки:
00:00 Новый рабочий процесс ИИ (Claude, Snowflake, dbt)
00:27 Почему не Chat GPT
00:50 Начало демонстрации
01:58 Обзор проекта
05:57 Создание другого Mart
07:23 Обзор проекта dbt
07:57 Новый план
14:32 Обновление панели инструментов
17:09 Краткий обзор демонстрации
20:59 Пример с баскетболом