Требования к аппаратной платформе для работы нейроаналитики

Требования к видеопотоку и сцене для работы мета-детектора

Требования к изображениям для работы мета-детектора

Для настройки мета-детектора необходимо:

  1. Перейти на вкладку Детекторы.
  2. Под требуемой камерой выбрать Создать...→ Категория: Коммерция → Мета-детектор.

По умолчанию детектор включен. Для того чтобы детектор генерировал события, нужно указать текстовые запросы на английском языке в параметрах Текстовый запрос. Можно указать до 3 текстовых запросов.

При необходимости можно изменить другие настройки параметров детектора, указанных в таблице:

ПараметрЗначениеОписание
Характеристики объекта
ВидеопотокОсновной потокЕсли камера поддерживает многопоточность, выбрать поток, на котором необходимо осуществлять детектирование
Другое
ИмяМета-детекторВвести имя детектора или оставить имя по умолчанию
ВключитьДаПо умолчанию детектор включен. Для отключения выбрать значение Нет
Нет
ТипМета-детекторНазвание типа детектора (нередактируемое поле)

Количество обрабатываемых кадров в секунду

1Задать количество кадров в секунду, которое будет обрабатывать детектор. Значение должно быть в диапазоне [0,016, 100]
Режим работы декодераAuto

Выбрать процессор для декодирования видео. При выборе GPU приоритет отдается дискретной видеокарте (декодирование на чипах Nvidia NVDEC). Если подходящего графического процессора нет, то декодирование будет осуществляться с помощью технологии Intel Quick Sync Video. Иначе декодирование будет осуществляться на CPU

CPU
GPU
HuaweiNPU

Основные настройки

Режим работы детектораCPU

Выбрать процессор для работы нейросети (см. Требования к аппаратной платформе для работы нейроаналитики, Выбор Nvidia GPU при настройке детекторов)

  • Для оптимальной производительности рекомендуется использовать режим работы с дискретным GPU.
  • Если выбран процессор, отличный от CPU, то основная часть вычислительной нагрузки будет выполняться на этом устройстве. При этом CPU будет также задействован для работы детектора.
  • Запуск работы алгоритма на NVIDIA GPU после применения настроек может занимать несколько минут. Для ускорения последующих запусков можно использовать функцию кэширования (см. Оптимизация работы нейроаналитики на GPU в ОС Windows, Оптимизация работы нейроаналитики на GPU в ОС Linux).
Nvidia GPU 0
Nvidia GPU 1
Nvidia GPU 2
Nvidia GPU 3
Intel GPU
Порог распознавания20

Установить порог распознавания объектов в процентах. Если вероятность распознавания объекта меньше заданного, то эти данные не будут учитываться. Чем больше значение, тем выше качество распознавания, но некоторые события от детектора могут не учитываться. Значение должно быть в диапазоне [0,05, 100]

Текстовый запрос 1 

Ввести текстовый запрос на английском языке. 

Пример запросов:

  • Human and dog
  • Running human
  • Fallen human

Оптимальная структура запроса: 

  • Тип объекта (человек, автомобиль и т. д.).
  • Ключевой атрибут объекта (цвет, размер и т. д.);
  • Окружающая обстановка (дорога, помещение и т. д.);
  • Дополнительные уточнения сцены (ракурс, положение в пространстве).

Примеры: Woman wearing a black dress, White car pedestrian crossing top view

Рекомендуется использовать чат-боты с искусственным интеллектом последнего поколения, такие как ChatGPT-4o, которые способны:

  • Генерировать оптимизированные запросы, опираясь на синтаксис модели BLIP-2 (генерирование текстовых описаний из изображения).
  • Работать с веб-ссылками.
Текстовый запрос 2
Текстовый запрос 3
Расширенные настройки
Количество кадров для анализа и вывода15Задать минимальное количество кадров, на которых детектор должен обнаружить соответствие между текстовым запросом и изображением, чтобы сгенерировать событие. Значение должно быть в диапазоне [10, 100]
Настройки мета-поиска (начиная с версии Detector Pack 3.14)
Поиск по запросамДаПо умолчанию параметр выключен. При необходимости сохранять описание кадра, если он отличается от предыдущего, для дальнейшего поиска по текстовым запросам, нужно выбрать значение Да
Нет
Игнорировать похожие
ДаПо умолчанию параметр включен, и кадры, схожие с предыдущими, пропускаются. Для отключения игнорирования похожих кадров нужно выбрать значение Нет
Нет
Порог различия (%)25Указать в процентах пороговое значение отличия кадра от предыдущего, необходимое, чтобы сохранить кадр. Чем выше значение, тем больше кадров будет пропущено без сохранения как похожие. Значение должно быть в диапазоне [0, 100]. Значение по умолчанию - 25. В этом случае, если кадры различаются на 25% и меньше, то они будут пропущены и не сохранены

Для сохранения изменений параметров нажать на кнопку Применить . Для отмены изменений нажать на кнопку Отмена .

Настройка мета-детектора завершена.