Перейти к содержимому

Насколько быстрее ИИ работает на графическом процессоре по сравнению с центральным процессором? Д...

The Code Wolf

0:00 / 0:00

Насколько быстрее ИИ работает на графическом процессоре по сравнению с центральным процессором? Д...

5 433 просмотра · 1 год назад
The Code Wolf
9,38 тыс. подписчиков
5 433 просмотра · 1 год назад
Насколько быстрее модель ИИ работает на центральном процессоре (ЦП) по сравнению с графическим процессором (ГП)? Почему существует такой неуклонный спрос на более быстрые и мощные видеокарты? В этом видео мы рассмотрим, как ответить на этот вопрос на вашем локальном компьютере, используя простую комбинацию Ollama, Docker и простого кода приложения, написанного на языке C# или Python. Мы увидим, как запустить модель ИИ с использованием Ollama в контейнере Docker, чтобы контролировать, какие ресурсы использует модель ИИ, например, ЦП или ГП. Затем мы рассмотрим, как измерить время отклика ИИ в этих различных сценариях, используя несколько типов запросов, отправляемых и отслеживаемых простым кодом приложения. Это должно быть увлекательным упражнением, поэтому, пожалуйста, подпишитесь и поставьте лайк, если вам понравился контент. 00:00 Введение и контекст 01:21 Предварительные требования 02:45 Локальная настройка ИИ в Docker 07:07 Обзор кода приложения 09:08 Демонстрация и результаты теста скорости 16:52 Заключение Репозиторий GitHub: https://github.com/alex-wolf-ps/ai-sp... Похожие видео по ИИ и программированию: Использование ИИ для чата с базой данных SQL 4.0 — локальный ИИ, MySQL и Postgres, и многое другое!    • Use AI to chat with a SQL Database 4.0 - l...   Используйте новые шаблоны проектов .NET ИИ для создания приложений ИИ!    • Use the new .NET AI project templates to b...   Используйте векторный поиск в Azure SQL или SQL 2025    • Use Azure SQL and MSSQL 2025 vector search...   Создайте приложение ИИ для поиска изображений    • Build an AI app to search your images usin...   Создайте полностью локальное решение ИИ RAG на .NET    • Build a fully local AI RAG app - as simple...   Экосистема ИИ .NET максимально проста    • The .NET AI Ecosystem explained as simple ...   Функции Blazor .NET 9.0 за 9 минут    • New .NET 9.0 Blazor Features!   Создание приложений ИИ с использованием семантического ядра    • Use Semantic Kernel to build AI Apps and A...   Настройте стабильную диффузию локально:    • Stable Diffusion AI - a simple intro. Set ...   Повышение разрешения любого видео с помощью ИИ на вашем локальном компьютере    • AI Upscale Any Video on Your Local Machine...