Перейти к содержимому

Локальный ИИ на Unraid: то, о чем никто не рассказывает

The Uncast Show

0:00 / 0:00

Локальный ИИ на Unraid: то, о чем никто не рассказывает

20 824 просмотра · 4 месяца назад
The Uncast Show
18 тыс. подписчиков
20 824 просмотра · 4 месяца назад
Локальный ИИ на вашем сервере Unraid — это не только чат-боты, это генерация изображений, музыка, клонирование голоса, распознавание фотографий, автоматическая транскрипция и многое другое, и всё это работает на оборудовании, которое у вас уже есть. Но с чего же начать? В этом видео я подробно расскажу о локальном ИИ для пользователей Unraid. Что это такое на самом деле, два совершенно разных типа, которые вы можете запустить, и какое оборудование вам действительно нужно для начала работы. Это не руководство по настройке. Воспринимайте это как свою ментальную карту локального ИИ, чтобы, когда вы начнете устанавливать что-либо, вы действительно понимали, что делаете и зачем. Мы рассмотрим генеративный и предиктивный ИИ, три причины, по которым люди запускают ИИ локально (конфиденциальность, стоимость, контроль), реальные рабочие примеры на моем собственном сервере и полный обзор уровней оборудования от процессора до высокопроизводительной видеокарты, включая то, какую карту я бы рекомендовал купить в первую очередь и почему. Ключевые ссылки 🔗 Frigate (видеорегистратор с открытым исходным кодом и обнаружением объектов с помощью ИИ): https://frigate.video 🔗 Демонстрация Frigate в реальном времени: https://demo.frigate.video 🔗 Speaches (контейнер Whisper + Kokoro): https://speaches.ai 🔗 Ollama: https://ollama.com 🔗 Open WebUI: https://openwebui.com 🔗 ComfyUI: https://github.com/comfyanonymous/Com... ▶️ Похожие видео на канале. 🔗 A-Eye (локальное переименование фотографий с помощью ИИ):    • This AI Analyses Your Photos, Renames Them...   🔗 Paperless AI (автоматическая разметка документов):    • Install Ollama & AI Models for Paperless N...   💬 Хотите, чтобы я снял продолжение, в котором протестирую все эти видеокарты с помощью подходящего программного обеспечения для тестирования производительности на основе ИИ? Оставьте комментарий ниже и дайте мне знать. Рекомендации по оборудованию USB Edge TPU ML Accelerator: https://amzn.to/4tMBlzV NVIDIA RTX 3060 12GB: https://amzn.to/3PwVuM8 NVIDIA RTX 5070: https://amzn.to/3RizUvG ⏱️ Временные метки 0:00 - Вступление: что на самом деле может делать локальный ИИ 2:13 - Приветствие и что это за видео (и чем оно не является) 2:20 - Всё, что вы только что видели, было сгенерировано локально 2:33 - Что такое локальный ИИ? Конфиденциальность, стоимость, контроль 3:00 - Генеративный и предиктивный ИИ: объяснение 3:25 - Демонстрация Frigate (предиктивный ИИ в действии) 5:02 - Google Coral и периферийный ИИ 5:22 - Краткий совет: USB Coral против PCIe Coral 5:50 - A-Eye: когда предиктивному ИИ нужен графический процессор 6:35 - Whisper + Kokoro в одном контейнере (Speaches) 7:53 - Веб-интерфейсы против API: как локальные инструменты ИИ объединяются в цепочку 8:18 - OpenClaw: мой собственный голосовой помощник, построенный на Signal 9:50 - Ollama и Open WebUI для чат-ботов 10:50 - ComfyUI для генерации изображений 11:34 - Итак, какое оборудование вам действительно нужно? 12:00 - Видеопамять, оперативная память и скорость оперативной памяти для ИИ 14:02 - Уровень ЦП 15:08 - Уровень интегрированных графических процессоров 16:07 - Дискретные графические процессоры: линейка на бенчмарке 17:01 - Видео с бенчмарком (призыв к действию) 18:38 - Почему RTX 3060 12 ГБ — оптимальный вариант 20:22 - Другие карты Nvidia (2060, 2080 Ti, 5070, 5090) 22:06 - AMD и ROCm 22:43 - Intel Arc Pro B-серии для локального ИИ 23:30 - Краткий обзор Edge AI 24:15 - Небольшой секрет этого видео... Что вы будете создавать с помощью Unraid? Начните работу с Unraid за 15 минут или меньше: https://unraid.net/getting-started Некоторые из ссылок ниже являются партнерскими ссылками, это означает, что мы можем получить комиссию, если вы перейдете по ссылке и совершите покупку.