Требования ко сбору данных для обучения нейросетей

Для подготовки нейросетей требуется собрать и передать в компанию ITV материалы (видеозаписи, изображения) с видеокамер в том же разрешении и при тех же условиях, с которыми эти сети планируется использовать.

Например, если требуется нейросеть, которая будет работать в условиях улицы, то видеозаписи должны содержать все погодные условия (солнце, дождь, снег, туман и т.д.) в разное время суток (утро, день, вечер, ночь).

Общие требования к передаваемым данным:

При сборе материала выполняются конкретные требования к изображениям объектов, сцене, ракурсу, освещенности и видеопотоку для тех детекторов, которые планируется использовать (см. Конфигурирование программных модулей детекторов).
Если требуется обучение в разных условиях времени суток, освещения, ракурса, типа объектов или погоды, то видеоматериал необходимо собрать в равных долях для каждого условия, то есть он должен быть сбалансирован.
Пример
Необходимо детектировать человека на территории наблюдения ночью и днем.
Данные собраны верно:
- на обучение переданы 4 видеофрагмента с записью территории наблюдения длительностью 5 минут каждый;
- интересующий объект появляется в кадре в каждом видеофрагменте;
- 2 фрагмента записаны в ночных условиях, 2 − в дневных условиях.
Данные собраны неверно:
- - на обучение переданы 3 видеофрагмента с записью территории наблюдения длительностью 5 минут каждый;
  - интересующий объект появляется в кадре в каждом видеофрагменте;
  - 2 фрагмента записаны в ночных условиях, 1 − в дневных условиях.

Дополнительные требования к материалам для каждого инструмента нейроаналитики приведены в таблице.

Инструмент	Требования
Нейрофильтр	Не менее 1000 кадров с различными объектами интересующего класса в данных условиях сцены и столько же кадров без искомых объектов в кадре (шумовых кадров).
Нейротрекер	По 3-5 минут видеозаписей с интересующими объектами для данных условий сцены. Чем больше количество и вариативность различных ситуаций в сцене, тем лучше.
Трекер положения человека	10 секунд видео сцены, где нет персон. Не менее 100 различных уникальных персон для данных условий сцены. Внимание! Под разными условиями в том числе понимаются всевозможные положения человека на сцене (наклоны, разные расположения частей тела и т.д.).
Детектор экипировки (средств индивидуальной защиты)	С объекта должен быть собран список всей эталонной экипировки с примерами и согласован с компанией-производителем аналитики (см. Пример предоставления списка валидной экипировки на объекте). По 3-5 минут видеозаписей с персоналом для данных условий сцены. Персонал должен перемещаться и менять позу на переданных видеозаписях, а также снимать и надевать экипировку с периодичностью в 30 секунд. Так как Детектор экипировки (СИЗ) предназначен для искусственного постоянного освещения, то видеозаписи разных условий освещения не требуются.
Детекторы огня и дыма	Не менее 1000 кадров с различными объектами интересующего класса в данных условиях сцены и столько же кадров без искомых объектов в кадре (шумовых кадров).
Распознавание еды*	Должны быть предоставлены изображения не менее 80% ассортимента меню. На каждую позицию меню нужно от 20 до 40 изображений при разных условиях.

При соблюдении вышеуказанных требований к сбору данных, переданных для обучения нейросетевой модели, и при эксплуатации в условиях, мало отличающихся от условий, в которых был собран материал для обучения, гарантируется общая точность** нейросетевой аналитики от 90% до 97% и процент пропуска 5-7%. Для общих сетей*** гарантируется общая точность 80-95% и процент пропуска 5-20%.

Примечания

* Данная аналитика будет доступна в следующих версиях ПК Интеллект.

** Указана точность для нейросетевой модели, обучение которой выполнялось в эксплуатируемых условиях.

*** Общей сетью является сеть, обучение которой не выполнялось в эксплуатируемых условиях.

В дальнейшем требования могут изменяться или дополняться.

Page tree

Документация для версии Подсистема Detector Pack 3.0. Документация на другие версии также доступна.