Page History

Программный модуль Нейротрекер регистрирует траектории движения объектов в поле зрения видеокамеры во время записи, используя нейросеть, и сохраняет их в хранилище метаданных VMDA (см. Создание и настройка хранилища метаданных VMDA).
Конфигурирование программного модуля Нейротрекер включает в себя: основные и дополнительные настройки детектора, выбор территории видеонаблюдения, настройку нейрофильтра.  

Настройка программного модуля модуля Нейротрекер осуществляется происходит на панели настроек объекта Нейротрекер, который создается на базе объекта Камера на вкладке Оборудование диалогового окна Настройка системы.

Image Modified

Настройка программного модуля Нейротрекер осуществляется в следующем порядке:

Основные настройки детектора

...

Основная настройка нейротрекера происходит на вкладке Основные настройки настроечной панели объекта Нейротрекер

.
Image Modified

1. Установить флажок Генерировать событие при появлении/исчезновении трека

    (1), если необходимо генерировать событие при появлении/исчезновении трека.

   , чтобы при появлении объекта (трека) в кадре и уходе из кадра формировалось событие.

   Info
   title Примечание
   События о появлении и исчезновении трека появляются только в отладочном окне (см. Запуск отладочного окна), в Протоколе событий они не отображаются.

2. Установить флажок Показывать объекты на изображении (2), если необходимо выделять , чтобы при просмотре живого видео детектируемый объект выделялся рамкой на изображении в окне интерфейсного объекта Монитор.

3. Установить флажок Сохранять треки для отображения в архиве, чтобы при просмотре видеоархива детектируемый объект выделялся рамкой.

   Info
   title Примечание
   Данный параметр не влияет на поиск VMDA и имеет исключительно визуальный характер. При использовании этого параметра будет задействована БД titles.

4. Установить флажок Квантизация модели, чтобы включить квантизацию модели. По умолчанию флажок снят. Данный параметр позволяет уменьшить потребление вычислительных мощностей графического процессора.
   

   Info
   title Примечание
   В компании ITV было проведено исследование, которое для модели, обученной идентифицировать характеристики детектируемого объекта, показало следующие результаты: квантизация может привести и к повышению процента распознавания, и к его падению. Это связано с обобщением математической модели. Изменение процента детекции колеблется в пределах ± 1,5%, а процент идентификации объекта в пределах ± 2%. Квантизация модели применима только для NVIDIA GPU. Первый запуск детектора с активированной функцией квантизации может занять больше времени, чем стандартный запуск. Если используется кэширование GPU, последующие запуски детектора с квантизацией будут выполняться без задержек.

5. Из раскрывающегося списка Тип объекта выбрать тип объекта для анализа:
   • Люди обычный ракурс − камера направлена на человека под углом 100–160°;
   • Люди вид сверху − камера направлена на человека сверху под небольшим углом;
   • Авто обычный ракурс − камера направлена на автомобиль под углом 100–160°;
   • Человек и транспортное средство (Нано) – распознаются человек и транспортное средство, небольшой размер сети;
   • Человек и транспортное средство (Средняя) – распознаются человек и транспортное средство, средний размер сети;
   • Человек и транспортное средство (Большая) – распознаются человек и транспортное средство, большой размер сети.
     

     Info
     title Примечание
     Нейросети названы с учетом детектируемых ими объектов. В названиях могут быть указаны размеры нейросети (Нано, Средняя,

   (3), если необходимо включить сохранение метаданных обнаруженных треков в базу данных. Например, это позволит выделять детектируемый объект рамкой при просмотре видеоархива.

6. Выбрать необходимый файл нейросети с моделью трекинга (4).

7. • Большая), которые указывают на количество потребляемых ресурсов. Чем больше нейросеть, тем выше точность распознавания объектов.

8. По умолчанию инициализируется стандартная (дефолтная) нейросеть согласно выбранным типу объекта на шаге 5 и устройству на шаге 7. Стандартные сети для разных типов процессора подбирать вручную не требуется, т.к. это происходит автоматически. Если для использования подготовлена уникальная нейросеть, то справа от поля Модель трекинга нажать кнопку Image Added и в открывшемся стандартном окне проводника Windows указать ее файл. 
   

   Note
   title Внимание!
   Для подготовки нейросети необходимо обратиться в службу технической поддержки ITV (см. Требования ко сбору данных для обучения нейросетей). Использование подготовленной нейросети для конкретной сцены позволяет детектировать объекты только определенного типа (например, человек, велосипедист, мотоциклист и т.д.).

9. Из раскрывающегося списка Устройство выбрать устройство, на котором будет происходить работа нейросети: центральный процессор (CPU), один из графических процессоров NVIDIA или один из графических процессоров Intel. Auto (значение по умолчанию) − устройство выбирается автоматически: высший приоритет получает NVIDIA GPU, за ним следует Intel GPU, потом CPU. 
   

   Note
   title Внимание!
   Рекомендуется использовать графический процессор. Запуск работы алгоритма на NVIDIA GPU после применения настроек может занимать несколько минут. Для ускорения последующих запусков можно использовать функцию кэширования (см. Настройка ускорения запуска нейроаналитики на GPU).

10. Из раскрывающегося списка Обрабатывать выбрать, какие именно объекты будут обработаны нейросетью:
    • Все объекты − движущиеся и неподвижные объекты;
    • Только движущиеся объекты − объект считается движущимся, если за все время существования его трека он сместился более чем на 10% от своей ширины или высоты. Использование данного параметра позволяет уменьшить количество ложных срабатываний;

    • Только неподвижные объекты − объект считается неподвижным, если за все время существования его трека он сместился не более чем на 10% от своей ширины или высоты. Если неподвижный объект начнет движение, детектор сработает и объект больше не будет считаться неподвижным.
      

      Info
      title Примечание
      Выбор только движущихся объектов и только неподвижных объектов не является взаимоисключающим, т.к. часть треков может быть не определена ни как движущиеся, ни как неподвижные. Вначале нейросеть фиксирует все объекты, а после этого детектор отсеивает ненужные треки в соответствием с выбранным значением настройки Обрабатывать.

11. Из раскрывающегося списка Положение камеры выбрать: 
    1. Стена – объекты отслеживаются, только если их нижняя часть попадает в территорию наблюдения, определенную в настройках детектора.
    2. Потолок – объекты отслеживаются. даже если их нижняя часть не попадает в территорию наблюдения, определенную в настройках детектора.

Выбор территории видеонаблюдения

1. Нажать кнопку Настройки. В результате откроется настроечное окно детектора.
   Image Added
2. В окне Настройки детектора нажать кнопку Остановить видео для постановки воспроизведения на паузу и захвата кадра видеоизображения.
   
3. Нажать кнопку Территория наблюдения для определения области наблюдения, при этом кнопка будет подсвечена синим цветом.
   Image Added
4. На захваченном кадре видеоизображения последовательно задать с помощью мыши узловые точки области, в которой будет происходить обнаружение объектов, при этом остальная часть кадра будет затемнена. Территория наблюдения может быть только одна. Для удаления области нажать кнопку Image Added. Если территория наблюдения не указана, то анализируется весь кадр.
5. Нажать кнопку ОК для закрытия окна Настройки детектора и возврата к панели настроек детектора.

Дополнительные настройки 

1. Перейти на вкладку Дополнительные настройки настроечной панели нейротрекера. 
   Image Added

2. В поле Порог распознавания [0, 100] ввести чувствительность нейротрекера – целое число в диапазоне от 0 до 100. В поле Порог распознавания: 0..100 (5) указать порог распознавания объектов от 0 до 100.

   Info
   title Примечание
   Порог распознавания Чувствительность нейротрекера определяется экспериментально. Чем порог чувствительность меньше, тем больше вероятность ложных срабатываний.  Чем порог чувствительность больше, тем меньше вероятность ложных срабатываний, однако могут пропускаться некоторые полезные треки. См. Примеры настройки нейротрекера для решения типовых задач.

3. В поле Ограничение частоты кадров (6) указать количество Количество обрабатываемых кадров в сек [0,016, 100] в диапазоне от 0,016 до 100 задать число кадров в секунду, которое будет обрабатывать нейросеть. Для всех остальных кадров будет выполняться интерполяция . Чем – нахождение промежуточных значений по имеющемуся дискретному набору ее известных значений. Чем выше значение параметра, тем точнее трекинг, но выше нагрузка на процессор.

4. Из раскрывающегося списка Устройство (7) выбрать устройство, на котором будет происходить работа нейросети.

5. Info
   title Примечание
   Рекомендуемое значение – не менее 6 кадров в секунду. Для быстро перемещающихся объектов (бегущий человек, машина) частота кадров в секунду должна быть не менее 12 (см. Примеры настройки нейротрекера для решения типовых задач).

6. В поле Минимальное количество срабатываний [2, 100]В поле Минимальное количество срабатываний (8) указать минимальное количество срабатываний нейротрекера для отображения трека объекта. Чем больше значение данного параметра, тем дольше пройдет времени от обнаружения объекта до отображения его трека. При этом, низкое Низкое значение данного параметра может привести к ложным срабатываниям. Значение по умолчанию – 6. Диапазон значений – от 2 до 100, введенное число больше максимального или меньше минимального значения из указанного промежутка автоматически приводится к максимальному или минимальному значению соответственно.

7. В поле Время удержания

   трека 

   трека (

   9) указать

   сек) в диапазоне от 0,3 до 1000 указать время в секундах, 

   после истечения

   по истечении которого трек объекта считается потерянным. Данный параметр

   может быть актуален

   полезен в ситуациях, когда один объект в кадре временно перекрывает другой. Например, когда

   более

   крупная машина полностью перекрывает

   более мелкую

   небольшой автомобиль.

8. Из раскрывающегося списка Обрабатывать (10) выбрать, какие объекты необходимо обрабатывать нейросетью:
   • Все объекты - движущимся и неподвижные объекты.
   • Только движущиеся объекты - объект считается движущимся, если за все время существования его трека он сместился более чем на 10% от своей ширины или высоты. Использование данного параметра позволяет уменьшить количество ложных срабатываний.
   • Только неподвижные объекты - объект считается неподвижным, если за все время существования его трека он не сместился более чем на 10% от своей ширины или высоты.
Задать территорию наблюдения на видеоизображении:
9. Нажать кнопку Настройка (11). Будет открыто окно Настройки детектора.
   Image Removed
10. Нажать кнопку Остановить видео (1) для захвата кадра видеоизображения.
11. Нажать кнопку Территория наблюдения (2).
12. Задать область, в которой будет производиться обнаружение объектов (3).
Нажать кнопку ОК (4).

13. Info
    title Примечание
    Если объект (трек) находится близко к границе кадра, то с момента исчезновения объекта из кадра до момента удаления его трека проходит примерно половина времени, указанного в поле Время удержания трека (сек).

14. Установить флажок Сканирующий режим для обнаружения небольших объектов. Включение этого режима увеличивает нагрузку на систему, поэтому на шаге 3 рекомендуется устанавливать небольшое количество обрабатываемых кадров в секунду. По умолчанию флажок снят. Подробное описание сканирующего режима см. на странице Настройка сканирующего режима.
15. При необходимости указать класс детектируемого объекта в поле Целевые классы. Для отображения треков нескольких классов их необходимо указать через запятую с пробелом. Например, 1, 10.
    Числовые обозначения классов для встроенных нейросетей: 1 – Люди обычный ракурс / Люди вид сверху, 10 – Авто обычный ракурс.
    

    Info
    title Примечание
    Если оставить поле пустым, будут отображаться треки всех доступных классов из нейросети (Тип объекта, Файл нейросети). Если указать класс/классы из нейросети, будут отображаться треки указанного класса/классов (Тип объекта, Файл нейросети). Если указать класс/классы из нейросети и класс/классы, отсутствующие в нейросети, будут отображаться треки класса/классов из нейросети (Тип объекта, Файл нейросети). Если указать класс/классы, отсутствующие в нейросети, будут отображаться треки всех доступных классов из нейросети (Тип объекта, Файл нейросети).

Нейрофильтр 

Для отсеивания части треков можно использовать нейрофильтр. Например, нейротрекер

...

обнаруживает все грузовые автомобили, а нейрофильтр оставляет только те треки, которые соответствуют автомобилям с открытыми дверями кузова. Для настройки нейрофильтра

...

:

1. Перейти на вкладку Нейрофильтр.вкладку Нейрофильтр настроечной панели нейротрекера. 
   Image Added
   
2. Установить флажок флажок Включить фильтрацию (1).

3. Выбрать необходимый файл нейросети для нейрофильтра (2).

4. Из раскрывающегося списка Устройство (3) выбрать устройство, на котором будет происходить работа нейросети для нейрофильтра.
   Image Removed
для активации нейрофильтра. По умолчанию флажок снят.
5. По умолчанию инициализируется стандартная (дефолтная) нейросеть согласно выбранному устройству на шаге 4. Стандартные сети для разных типов процессора подбирать вручную не требуется, т.к. это происходит автоматически. Если для использования подготовлена уникальная нейросеть, то справа от поля Модель трекинга нажать кнопку Image Added и в открывшемся стандартном окне проводника Windows указать ее файл. 
   

   Note
   title Внимание!
   Для подготовки нейросети необходимо обратиться в службу технической поддержки компании ITV (см. Требования ко сбору данных для обучения нейросетей). Использование подготовленной нейросети для конкретной сцены позволяет детектировать объекты только определенного типа (например, человек, велосипедист, мотоциклист и т.д.).

6. Из раскрывающегося списка Устройство выбрать устройство, на котором будет происходить работа нейросети: центральный процессор (CPU), один из графических процессоров NVIDIA или один из графических процессоров Intel.. 
   

   Info
   title Примечание
   Устройство для нейрофильтра должно совпадать с устройством, указанным для нейротрекера в п.7 основных настроек.  Запуск работы алгоритма на графической процессоре NVIDIA GPU после применения настроек может занимать несколько минут.

7. Для сохранения изменений нажать кнопку ПрименитьНажать кнопку Применить (12).

Настройка программного модуля Нейротрекер завершена.

...