Коротко: visual tracking на БПЛА — это не одна нейросеть. Рабочий контур состоит из камеры, детектора, трекера, проверки устойчивости, канала передачи и безопасного состояния при потере объекта. Ниже — учебная модель, которая показывает, как FPS, задержка и скорость объекта влияют на смещение оценки.
Расчёт не управляет дроном, не выдаёт команды наведения и не заменяет испытания на стенде. Проверяйте алгоритм сначала на записанном видео и в симуляторе. При потере наблюдения контур должен переходить в заранее определённое безопасное состояние.
Из чего состоит контур
Интерактивная модель / visual tracking
Задержка контура и смещение оценки
Выберите профиль или измените параметры. Модель показывает, когда сопровождение ещё можно проверять, а когда данные уже слишком старые для безопасной логики.
Модель / без управления
Данных достаточно для следующей проверки, но модель не подтверждает работу конкретной системы.
Серые отметки — моменты новых измерений. Красная отметка показывает положение объекта после расчётной задержки; это визуальная схема, а не трек реального полёта.
Детектор и трекер решают разные задачи
| Компонент | Вопрос | Сильная сторона | Типичная ошибка |
|---|---|---|---|
| YOLO / детектор | Что находится в текущем кадре? | Семантика: класс, confidence, bounding box. | Считать один удачный кадр доказательством устойчивого сопровождения. |
| OpenCV-трекер | Где тот же объект между измерениями? | Высокая частота обновления и небольшая нагрузка. | Продолжать траекторию после потери объекта без повторной проверки. |
| Validation | Можно ли доверять новой оценке? | Отсеивает скачки, пропуски и устаревшие данные. | Использовать только confidence без проверки времени и геометрии. |
Как проверять контур
- Начните с записанного видео: измерьте FPS, задержку, пропуски и ложные срабатывания на сценах с разным светом.
- Разделите метрики детектора и трекера. Высокая частота OpenCV не компенсирует плохое качество новых детекций.
- Добавьте проверку возраста кадра, минимальной уверенности и допустимого скачка координат.
- Подключайте только телеметрическое состояние. При потере объекта или канала выдавайте «нет валидной оценки», а не последнюю координату бесконечно.
- Только после стенда и симулятора переходите к ограниченным полётным испытаниям с заранее проверенным безопасным режимом.
Материалы для продолжения
Выбор между YOLO и OpenCV объясняет различие уровней обработки. Интерактивная модель обнаружения и сопровождения показывает влияние канала и задержки. Для навигационной части полезно сравнить VIO и Optical Flow + LiDAR.