Перейти к содержимому

DJI SmartTrack на это не способен — поэтому я создал свой собственный ИИ-трекинг | Matrice 4E + M...

Tech In The Wild

0:00 / 0:00

DJI SmartTrack на это не способен — поэтому я создал свой собственный ИИ-трекинг | Matrice 4E + M...

776 просмотров · 1 месяц назад
Tech In The Wild
902 подписчика
776 просмотров · 1 месяц назад
DJI SmartTrack не смог этого сделать, поэтому я создал собственную систему отслеживания с помощью ИИ на базе DJI Matrice 4E + Manifold 3. В этом видео я показываю, как я воссоздал основные функции SmartTrack, используя пользовательскую цель ИИ, встроенную логику управления, автоматическое рыскание, отслеживание подвеса, управление масштабированием, управление пилотом и поведение восстановления. В прошлом видео мне удалось заставить Manifold 3 распознать Фентона. Но этот проект был посвящен чему-то большему: может ли пользовательское обнаружение ИИ управлять собственной системой отслеживания, если DJI SmartTrack не принимает эту цель? Вот о чем на самом деле это видео. Я начал с очевидного подхода: передать пользовательский блок ИИ системе DJI SmartTrack. Это оказалось невозможно, потому что SmartTrack ожидал цель, идентифицированную собственной системой DJI. Поэтому, вместо того чтобы остановиться на этом, я переделал необходимые мне компоненты самостоятельно. Это означало создание системы, которая могла бы: удерживать заданную цель в центре с помощью управления подвесом; вращать летательный аппарат с помощью автоматического рыскания; корректировать кадрирование с помощью автоматического масштабирования; учитывать ввод с помощью джойстика пилота; оставаться на правильной цели с помощью функции Sticky Active Track; более интеллектуально восстанавливать фокус при временной потере цели. Фентон — тестовый объект в этом видео, но суть в более широкой идее: пользовательское отслеживание с помощью ИИ для специализированных сценариев использования. Подобную систему можно адаптировать для обследования дикой природы, инспекций, мониторинга оборудования, отслеживания скота, обеспечения безопасности, спортивных мероприятий или задач видеосъемки. Это не полная замена всем функциям DJI SmartTrack, и дрон не летит автономно по маршруту, преследуя объект. Я по-прежнему контролирую фактическую траекторию полета. Но Manifold может распознавать заданную цель, удерживать камеру на ней, вращать летательный аппарат в ее направлении, управлять масштабированием и восстанавливать фокус при временной потере цели. Бесплатное руководство: Обычно я предоставляю полное пошаговое руководство к этим проектам. Этот проект оказался гораздо сложнее, поэтому пока я подготовил бесплатное обзорное руководство, объясняющее архитектуру, поток управления и основные концепции, не раскрывая при этом полную готовую реализацию. Бесплатное обзорное руководство по пользовательскому отслеживанию ИИ: https://docs.google.com/document/d/1m... Если будет достаточно интереса, я, возможно, позже подготовлю полный исходный код и подробное руководство по сборке. Если вам это нужно, дайте мне знать в комментариях. Оборудование / Платформа: Дрон: DJI Matrice 4E Бортовой компьютер: DJI Manifold 3 Управление: DJI RC Plus 2 Направление SDK: DJI PSDK / пользовательская бортовая логика Связанное видео: Часть 1 / Видео обнаружения:    • DJI Manifold 3 + Matrice 4E - My First Cus...   #DJI #Manifold3 #Matrice4E #AITracking #SmartTrack #DroneAI #ComputerVision #DroneTech #CustomAI #TechInTheWild Разделы 00:00 Вступление 00:29 Почему DJI SmartTrack не подойдет 01:30 Базовое отслеживание подвеса 02:25 Тестирование на открытом воздухе (автоматическое рыскание, управление масштабированием, мертвый центр и прогнозирование) 04:10 Гармонизация управления 06:21 Финальное тестирование в реальном времени 11:59 Заключительные мысли 14:08 Следующий проект & Заключение