Перейти в хранилище документации
Обратиться в техническую поддержку![]()
...
Начиная с версии DetectorPack 3.9 в состав пакета Дополнение: пакет нейроаналитики (см. Установка дополнительных пакетов DetectorPack) добавлена утилита, которая позволяет создавать GPU кэши сетей без использования ПК Интеллект X. Наличие кэша влияет на ускорение инициализации и оптимизирует потребление видеопамяти.
...
Оптимизация работы нейроаналитики на GPU завершена. Утилита создаст кэши 4 нейросетей, входящих в состав пакета Дополнение: пакет нейроаналитики:
...
-p – ключ для создания кэша для определенной нейросети.
Пример команды:
| Code Block | ||
|---|---|---|
| ||
./NeuroPackGpuCacheGenerator -p /opt/ITV/DetectorPack/NeuroSDK/GeneralNMHumanAndVehicle_Nano_v1.0_GPU_onnx.ann |
-v – ключ для вывода лога процедуры в консоль в процессе формирования кэша.
Пример команды для автоматического создания кэшей 4-х нейросетей, входящих в состав пакета Дополнение: пакет нейроаналитики с выводом логов:
| Code Block | ||
|---|---|---|
| ||
./NeuroPackGpuCacheGenerator -v |
--int8=1 – ключ для создания кэша для тех нейросетей, для которых доступна квантование. По умолчанию: --int8=0 – выключен.
Пример команды:
| Code Block | ||
|---|---|---|
| ||
./NeuroPackGpuCacheGenerator -p /opt/ITV/DetectorPack/NeuroSDK/GeneralNMHumanAndVehicle_Nano_v1.0_GPU_onnx.ann --int8=1 |
| Note | ||
|---|---|---|
| ||
| Нейросети, для которых доступен режим квантования, входят в состав пакета нейроаналитики вместе с одноименным файлом *.info |
-f – ключ для сохранения логов процедуры кэширования в файлы. Доступен с версии DetectorPack 3.15. При совместном использовании ключей -v и -f логи по каждому созданному кэшу сохраняются в: /<Путь к папке с кэшем, созданной для системной переменной GPU_CACHE_DIR>/caching-utility-log. Для каждой нейросети создается отдельный файл лога. Файлы логов, созданные при предыдущих запусках утилиты, удаляются.
Пример команды для создания кэша с подробным логированием в консоль и сохранением логов в файлы:
| Code Block | ||
|---|---|---|
| ||
./NeuroPackGpuCacheGenerator -v -f |
Нейросети, для которых доступен режим квантования (см. Нейротрекер, Детектор остановившегося объекта, Нейросчетчик):
Начиная с версии DetectorPack 3.11 добавлены нейросети:
...