Ошибка нехватки памяти в Spark | Настройка памяти в Spark | Управление памятью в Spark | Часть 1
Data Savvy
0:00 / 0:00
Ошибка нехватки памяти в Spark | Настройка памяти в Spark | Управление памятью в Spark | Часть 1
139 375 просмотров · 5 лет назад
Data Savvy
31,4 тыс. подписчиков
139 375 просмотров · 5 лет назад
Это видео является частью серии вопросов для собеседования по Spark.
Проблемы с памятью в Spark — одна из самых распространенных проблем, с которыми сталкиваются разработчики. Поэтому на собеседованиях по Spark это один из самых распространенных вопросов. В этом видео мы рассмотрим следующие вопросы:
Что такое проблема с памятью в Spark?
С какими компонентами может столкнуться проблема нехватки памяти в Spark?
Проблема нехватки памяти в драйвере?
Проблема нехватки памяти в исполнителе?
Как динамическое сокращение разделов влияет на производительность Spark?
Вот несколько полезных ссылок:
Репозиторий Git: https://github.com/harjeet88/
Вопросы для собеседования по Spark: • Spark Interview Questions
Если вы заинтересованы, присоединяйтесь к нашему сообществу. Пожалуйста, присоединяйтесь к следующим группам:
Telegram: http://t.me/bigdata_hkr
Whatsapp: https://chat.whatsapp.com/KKUmcOGNiix...
Вы можете написать мне по электронной почте с любыми вопросами:
aforalgo@gmail.com
#apachespark #sparktutorial #bigdata
#spark #hadoop #spark3