Перейти к содержимому

Ошибка нехватки памяти в Spark | Настройка памяти в Spark | Управление памятью в Spark | Часть 1

Data Savvy

0:00 / 0:00

Ошибка нехватки памяти в Spark | Настройка памяти в Spark | Управление памятью в Spark | Часть 1

139 375 просмотров · 5 лет назад
Data Savvy
31,4 тыс. подписчиков
139 375 просмотров · 5 лет назад
Это видео является частью серии вопросов для собеседования по Spark. Проблемы с памятью в Spark — одна из самых распространенных проблем, с которыми сталкиваются разработчики. Поэтому на собеседованиях по Spark это один из самых распространенных вопросов. В этом видео мы рассмотрим следующие вопросы: Что такое проблема с памятью в Spark? С какими компонентами может столкнуться проблема нехватки памяти в Spark? Проблема нехватки памяти в драйвере? Проблема нехватки памяти в исполнителе? Как динамическое сокращение разделов влияет на производительность Spark? Вот несколько полезных ссылок: Репозиторий Git: https://github.com/harjeet88/ Вопросы для собеседования по Spark:    • Spark Interview Questions   Если вы заинтересованы, присоединяйтесь к нашему сообществу. Пожалуйста, присоединяйтесь к следующим группам: Telegram: http://t.me/bigdata_hkr Whatsapp: https://chat.whatsapp.com/KKUmcOGNiix... Вы можете написать мне по электронной почте с любыми вопросами: aforalgo@gmail.com #apachespark #sparktutorial #bigdata #spark #hadoop #spark3