Типичные вопросы с собесов на Дата Инженера Часть 2 | Hadoop Spark DWH

Собрал типичные вопросы с собесов на Дата Инженера (Инженера Данных). Тут взял вопросы из нашего roadmap для Дат Инженера по темам Hadoop, DWH, Spark. Старт нашего потока Boot Camp уже 1 сентября. Пиши в телеграм бота https://s.salebot.pro/07a7864a2e3fef8... Таймкоды: 00:00 Вступление 00:13 Если файл меньше блока в HDFS 01:43 Что такое HDFS: блоки, репликация, NameNode и DataNode 04:32 Что такое Hive 05:35 Что такое MapReduce 06:30 NameNode и Seconadary NameNode 08:50 Репликация в HDFS 09:32 Проблема маленьких файлов в HDFS 10:42 Data Lake vs DWH 11:30 Kimball, Inmon и Data Vault 13:31 OLTP vs OLAP 15:02 UNION vs UNION ALL 15:32 VIEW vs MATERIALIZED VIEW 16:34 RDD, DataFrame и Dataset 17:17 Spill данных в Spark 18:28 Transformations vs Actions 19:35 Итоги и про обучение Полезные ссылки: Telegram канал: https://t.me/halltape_data Roadmap для Data Engineer: https://s.salebot.pro/07a7864a2e3fef8... Twitch канал: / halltape GitHub: https://github.com/halltape Канал с подкастами: / @beyond_the_code Канал с подкастами:    / @beyond_the_code