Учиться играть на гитаре с помощью искусственного интеллекта? Развертывание приложения для потоко...
Roboflow
0:00 / 0:00
Учиться играть на гитаре с помощью искусственного интеллекта? Развертывание приложения для потоко...
1 703 просмотра · 5 месяцев назад
Roboflow
72,7 тыс. подписчиков
1 703 просмотра · 5 месяцев назад
В этом видео инженер Roboflow Фелипе Томино демонстрирует разработанное им приложение для компьютерного зрения, помогающее людям практиковать гитарные гаммы. Приложение использует веб-камеру для обнаружения гитары в реальном времени, отображая гриф, резонаторное отверстие и другие особенности. Затем приложение накладывает интерактивную диаграмму для отработки гамм.
Вы узнаете, как Фелипе использовал функцию автоматической разметки Roboflow для быстрой аннотации своего набора данных, обучения пользовательской модели, а затем запустил приложение с помощью бессерверного видео API Roboflow, который позволяет обрабатывать потоки видео в реальном времени через WebRTC. После этого вы увидите демонстрацию работы приложения и то, как Фелипе преобразует JSON-предсказания в наложение на холст для интерактивного взаимодействия с пользователем.
= Дополнительные ресурсы =
Roboflow Serverless API: https://docs.roboflow.com/deploy/host...
Roboflow Auto Label: https://docs.roboflow.com/annotate/au...
Начало работы с Roboflow: https://docs.roboflow.com/
= Разделы =
00:00 - Введение: Зачем создавать приложение для видеосъемки, чтобы практиковаться в игре на гитаре?
02:27 - Подготовка набора данных с помощью Auto Label
05:32 - Использование Serverless Video API для работы приложения
07:44 - Обзор кода: Подключение WebRTC к Canvas Overlay
09:31 - Живая демонстрация: Практика гитарных гамм в реальном времени