GPU в Kubernetes для рабочих нагрузок ИИ
DevOps & AI Toolkit
0:00 / 0:00
GPU в Kubernetes для рабочих нагрузок ИИ
20 258 просмотров · 1 год назад
DevOps & AI Toolkit
98,2 тыс. подписчиков
20 258 просмотров · 1 год назад
Сегодня мы углубимся в запуск моделей ИИ на Kubernetes с поддержкой GPU. Узнайте, как управлять GPU в кластерах Kubernetes, создавать узлы с GPU и оптимизировать использование ресурсов без чрезмерных затрат. Мы шаг за шагом рассмотрим настройку кластера Kubernetes в Google Cloud (аналогичная логика применима и к другим облачным провайдерам), развертывание моделей ИИ, таких как Llama2 от Ollama, и управление разделением ресурсов GPU. Смотрите сейчас, чтобы освоить рабочие нагрузки ИИ на основе GPU в Kubernetes!
#Kubernetes #GPU #AI
▬▬▬▬▬▬▬▬▬▬▬▬▬▬▬▬▬▬
Спонсор: CAST AI
🔗 https://cast.ai/devopstoolkit
▬▬▬▬▬▬▬▬▬▬▬▬▬▬▬▬▬▬
Присоединяйтесь к каналу: / devopstoolkit
▬▬▬▬▬▬ 🔗 Дополнительная информация 🔗 ▬▬▬▬▬▬
➡ Текст и команды: https://devopstoolkit.live/ai/unlock-...
▬▬▬▬▬▬ 💰 Спонсорство 💰 ▬▬▬▬▬▬
Если вас интересует спонсорство этого канала, посетите https://devopstoolkit.live/sponsor для получения дополнительной информации. Также вы можете связаться со мной через Twitter или LinkedIn (см. ниже).
▬▬▬▬▬▬ 👋 Свяжитесь со мной 👋 ▬▬▬▬▬▬
➡ Twitter: / vfarcic
➡ LinkedIn: / viktorfarcic
▬▬▬▬▬▬ 🚀 Другие каналы 🚀 ▬▬▬▬▬▬
🎤 Подкаст: https://www.devopsparadox.com/
💬 Прямые трансляции: / devopsparadox
▬▬▬▬▬▬ ⏱ Таймкоды ⏱ ▬▬▬▬▬▬
00:00 Вывод результатов ИИ с использованием графических процессоров
01:30 CAST AI (спонсор)
02:29 Использование графических процессоров для вывода результатов ИИ в Kubernetes