Архитектура

Основные модули	Функции
Activation Module	Модуль отвечает за активацию OMNI Agent.
Camera Handler	Разбиение видеопотока с камеры или видеофайла на кадры и подготовка кадров к обработке.
Human Process Handler	Результаты обработки лиц и тел людей передаются в модуль Human Process Module, где преобразуются в форму процессов и событий для последующей передачи в OMNI Platform или внешний сервис через вебхуки или MQTT.
Обработка кадров тел людей	Функции
Body Detector Processing Block	Детекция тел людей на кадрах.
Byte Track Processing Block	Реализует алгоритм Byte Track для улучшения качества работы детектора людей.
View Transform Handler	Переводит координаты детекций людей с камеры на карту помещения.
Multistream Mapping Handler	Объединяет положения детекций на карте помещения с разных камер.
Embeddings Processing Block	Создает эмбеддинги по кропам тел. В данном случае эмбеддинг — это векторное представление задетектированного тела.
Reidentification Handler	Формирование треков людей и реидентификация. В процессе детекции каждому кадру присваивается track_id. Если на последовательности кадров идентифицируется один и тот же человек, track_id всех относящихся к нему кадров меняются на track_id первого кадра, принадлежащего этому человеку.
Body Track Handler	Формирование и обработка путей перемещения людей на кадрах (трекинг).
Hpe Resnet V1D Processing Block	Внутренний компонент пайплайна HAR. Определяет положение скелета человека на кадре.
Har Container Processing Block	Производит агрегацию положений скелета человека во времени в общий контейнер.
Har Pose C3D Processing Block	Внутренний компонент пайплайна HAR. Определяет класс положения человека.
Har Hll Processing Block	Детектирует действие человека.
Обработка кадров лиц людей.	Функции
Videoworker Callbacks Handler	Детекция лиц.
Videoworker Samplify Handler	Преобразование детекций в удобный формат сэмплов (sample).
Face Recognition Attributes Splitter	Выбор лучшего кадра (бестшота) трека лица.
Face Recognizer	Построение биометрического шаблона.
Matcher Module	Поиск шаблона по базе данных.
Coalesce Facerec Attributes	Объединение результатов матчинга и трекинга.
Face Track Handler	Оценка атрибутов лиц в кадре (пол, возраст, эмоции, Liveness, наличие маски), поиск похожих лиц по базе данных OMNI Agent и OMNI Platform (через модуль Database Sync Handler). При наличии совпадений с базой, ID изображения из базы также записывается в результат обработки.
Attentions Handler	Оценка внимания человека (смотрит ли человек на кадре в камеру).

Инфраструктурные модули	Функции
Webhooks Handler	Передача процессов по вебхукам во внешний сервис.
Server Connection Handler	Передача процессов в OMNI Platform.
Webhook Data Projection Handler	Модуль проецирует данные в JSON-подобный документ для последующей передачи по вебхукам.
Server Data Projection Handler	Модуль проецирует данные в JSON-подобный документ для последующей передачи в OMNI Platform.
Database Sync Handler	Синхронизация локальной базы данных с базой данных OMNI Platform.
Reconfiguration Handler	Доступ к файлам конфигурации, перенастройка OMNI Agent без перезапуска приложения.
Preview Handler	Создание превью (кадров с камеры с отрисованными детекциями, которые передаются в веб-интерфейс OMNI Agent).
Frontend Handler	Управление OMNI Agent как веб-приложением.
External Process Handler	Приведение сигналов начала и окончания внешних событий к интервальному виду (процессов).
Http Redirection Module	Перенаправление запросов на сервер OMNI Platform.
Multisource Handler	Модуль создает пайплайн модулей обработки для каждого нового видеопотока.
Trace Handler	Модуль отвечает за сборку трейсов (логов) с модуля Body Detector.
Custom Resources Provider	Точка сбора информации о числе видимых людей и кадров с камеры, предоставляющая доступ к этим данным через внутренний API.
MQTT Data Projection Handler	Проецирует данные процессов для последующей отправки по локальной очереди MQTT.
MQTT Handler	Отправляет данные в локальную очередь.
Universal Best Shot Sender	Осушествление отправки данных детекций в формате аналогичном камерам HikVision.