В рубрику "Видеонаблюдение (CCTV)" | К списку рубрик  |  К списку авторов  |  К списку публикаций

Интеллектуализация PTZ-камеры
Автоматическое патрулирование, выбор целей и слежение

Р.А. Филипенко

Инженер-программист ООО "Синезис"

И.Е. Ермолаев

Начальник отдела машинного зрения ООО "Синезис"

Н.В. Птицын

Генеральный директор ООО "Синезис"

Задержка, вносимая цифровой подсистемой кодирования и декодирования видео, ограничивает возможности дистанционного слежения за целью PTZ-камерой и усиливает потребность в автоматизации слежения при помощи встроенной видеоаналитики. Рассмотрим основные задачи, которые можно решать на объекте благодаря автоматизированному управлению PTZ-камерами, а также продукты, предлагаемые сегодня на рынке для интеллектуализации PTZ-камер.

Задачи видеонаблюдения на объекте

Рассмотрим основные задачи, решаемые при автоматизации системы управления PTZ-камерой.

Автоматическое патрулирование
В рамках функции патрулирования PTZ-камера циклически "обходит" предпозиции наблюдения, заданные оператором, останавливается в каждой позиции на заданное время и транслирует видео с выбранным увеличением. Данная функция является стандартной и встроена практически во все модели PTZ-камер.

Преимуществом патрулирования по предпозициям является возможность охватить большую территорию и получить изображения в каждой позиции с хорошей детализацией. Недостатки функции – наличие слепой зоны во всех позициях кроме текущей и постоянное изменение фона сцены, что затрудняет анализ изображения аналитикой и оператором. В режиме патрулирования сложно распознать медленные изменения сцены за короткий интервал нахождения камеры в каждой позиции. Если оператор направляет камеру в некоторую позицию, то события, происходящие в других позициях, не регистрируются в видеоархиве.

Перечисленные недостатки могут быть устранены дополнительной установкой обзорных неподвижных камер, полностью закрывающих охраняемую территорию. Тогда PTZ-камера используется исключительно для получения детализированного изображения целей, обнаруживаемых при помощи обзорных камер. При этом увеличивается срок службы PTZ-камеры, поскольку уменьшается ее механическая нагрузка.

Автоматический выбор цели для PTZ-слежения
Источниками сигнала для автоматического выбора цели могу быть:

1. обзорная неподвижная камера – используется параллельно с купольной;
2. купольная камера – в режиме патрулирования;
3. другие сенсоры – например, радиоволновые или вибрационные датчики периметральной системы.

Видеосигнал с телевизионной или тепловизионной камеры обрабатывается видеоаналитикой, которая детектирует цели и определяет их местонахождение для наведения PTZ-камеры без участия оператора. Пример установки, которая реализует данный подход, представлен на рис. 1.

Если применяется несколько обзорных камер с перекрывающимися зонами действия, то желательно использовать многоканальную (многокамерную) видеоаналитику¹. Особенно важна многоканальная видеоаналитика при частом появлении целей. Повторное детектирование цели каждой камерой будет приводить к неэффективному использованию PTZ-камер и срывам слежения, что затруднит ретроспективный анализ архива.

Автоматическая расстановка приоритетов для детализации и слежения
В случае, когда в поле зрения системы наблюдения находится несколько целей, а число PTZ-камер ограничено, требуется распределять задачи между PTZ-камерами оптимальным образом с точки зрения их важности.

Алгоритм может вычислять приоритет цели с учетом нескольких критериев:

1. местонахождение цели – близость к охраняемому рубежу или наиболее важному объекту;
2. время слежения за объектом – например, каждая цель может сопровождаться PTZ-камерой не менее 10 с, после чего возможно переключение на другую цель;
3. классификация поведения человека – например, поведение "праздношатание в зоне" может иметь более высокий приоритет, чем "вход в зону".

Все найденные цели ставятся в приоритезированную очередь² для последующей обработки интеллектуальной системой видеонаблюдения.

Автоматический выбор PTZ-камеры
Алгоритм должен забирать цели из приоритезированной очереди в порядке их важности и распределять между доступными PTZ-камерами с учетом взаимного расположения целей и доступных камер. В работу алгоритма может вмешаться оператор, подающий команды на PTZ-камеру с помощью джойстика или программного интерфейса (рис. 4). В этом случае алгоритм должен задействовать другие PTZ-камеры для слежения за целями, оставшимися без внимания оператора.

На сложных объектах необходимо применение трехмерных моделей охраняемого объекта и зон действия камер³.

Автоматическое наведение PTZ-камеры
В простейшем случае алгоритм наведения может быть реализован при помощи многозонного детектора движения обзорной камеры: кадр разбивается на множество зон, каждая из которых ассоциируется с предпозициями PTZ-камеры. При срабатывании детектора движения в зоне (рис. 2) 

PTZ-камера переводится в соответствующую предпозицию (рис. 4). Чем больше зон задается при настройке, тем большее увеличение можно получить на PTZ-камере. Недостатком данного подхода являются неустойчивая работа при наличии нескольких целей и ограничения точности наведения, связанные с выбранными предпозициями PTZ-камеры. На объекте с большим пространством наблюдения и значительным числом камер рекомендуется аналитическое преобразование координат обзорной камеры в систему координат поворотной камеры без разделения кадров на зоны (рис. 3 и 4).

Связь между обзорной и управляемой камерой может быть установлена через глобальную систему координат реального мира, к которой привязываются все камеры⁴.

Точность преобразования из двумерной системы координат кадра в трехмерное пространство реального мира ограничивает приближение PTZ-камеры, поскольку в случае ошибки преобразования при сильном увеличении объект может оказаться вне поля зрения. Поэтому особенные требования предъявляются к видеоаналитике обзорной камеры: необходима качественная локализация (сегментирование) цели и качественная калибровка для связи его координат с поворотной камерой.

Автоматическое слежение за целью
После того как PTZ-камера наведена на цель, желательно применение алгоритмов слежения для отображения и записи целостного фрагмента видео цели, сопровождаемой PTZ-камерой. В процессе настройки алгоритма слежения приходится искать компромисс между степенью увеличения (и следовательно, детализацией) цели и частотой смещений PTZ-камеры. Чем сильнее увеличение, тем чаще приходится передвигать камеру.

Распространенные на рынке PTZ-камеры не позволяют плавно поворачивать камеру с переменной скоростью. При шаговом смещении положения PTZ-камеры изображение дергается и смазывается. Поэтому хороший алгоритм слежения должен минимизировать количество смещений камеры для заданного увеличения. Алгоритм слежения должен корректно работать в случае временного взаимного перекрытия целей, например если люди идут навстречу друг другу^{4, 5}.

PTZ-cлежение за целью может осуществляться тремя способами:

1. При помощи PTZ-камеры – самослежение.
2. При помощи обзорной камеры – внешнее слежение.
3. Гибридный способ.

Каждый из способов имеет свои преимущества и недостатки, сравнению которых мы посвятим отдельную публикацию.

Алгоритм самослежения удобен в случае, когда оператор задает цель вручную, а обзорная камера отсутствует или не видит цель. Алгоритм внешнего слежения более устойчиво работает при наличии нескольких целей. При равных условиях различимости объектов алгоритмы слежения на подвижной камере работают хуже, чем на неподвижной, так как в последнем случае алгоритм может лучше адаптироваться к неподвижному фону.

В теории гибридный способ должен обеспечить наиболее устойчивое слежение во всех ситуациях, но в известных нам системах он пока не реализован.

Влияние задержки

Слежение за целью при помощи привода PTZ – задача реального масштаба времени, чувствительная к задержке. Если общая задержка видео в IP-сети превышает 500 мс (половина секунды), то эффективно управлять камерой не может ни оператор, ни серверная видеоаналитика. Как правило, около 300 мс вносится передающим устройством (камерой или кодером) и около 100 мс вносится VMS-системой, декодирующей видео.

Качественное слежение за объектом может быть реализовано при локальной обработке видео до компрессии. В этом случае координаты цели могут быть рассчитаны по данным обзорной или PTZ-камеры за 20–40 мс. Такая система может сопровождать быстро перемещающиеся цели – например бегущего человека или движущееся транспортное средство – на хорошем увеличении.

Поддержка стандартов

Начиная с версии 1.02, международный стандарт ONVIF позволяет строить унифицированные решения для автоматического и ручного управления PTZ-камерами. В частности, стандарт описывает команды управления и считывания положения PTZ-камеры, системы координат, а также формат передачи метаданных о подвижных объектах с обзорной камеры в систему управления видео (VMS) и/или иные устройства для управления PTZ-камерой.

Оживленные сцены

Применение интеллектуальных функций PTZ в общественных местах ограничено возможностями видеоаналитики слежения. Сегодня на рынке не существует видеоаналитики, способной сопровождать человека в толпе без применения детектора лиц на обзорной камере.

Если разрешающая способность и угол наблюдения обзорной камеры позволяют использовать детектор лиц, то возможна автоматизация наведения PTZ-камеры для более точного распознавания лиц и записи детализированного изображения. При этом необходима реализация системы слежения по данным детектора лиц, чтобы оптимизировать работу PTZ-камеры для нужного сценария, например для слежения за одним человеком или для быстрого сканирования всех лиц в поле зрения.

Специальные требования к PTZ-камере

Большинство PTZ-камер, представленных на рынке, с интерфейсами Pelco D (для последовательного интерфейса RS-422/485) или ONVIF (для IP-сети) не имеют обратной связи с системой управления, в частности невозможно запросить текущую позицию камеры и установить камеру по абсолютным координатам. Это ограничение не позволяет использовать PTZ-камеру для слежения по координатам обзорной камеры.

Обзор решений на рынке

1. В модуле TRASSIR ActiveDome компании DSSL реализована функция PTZ-слежения с аналитическим преобразованием координат. В кадре обзорной камеры задается область, которая путем процедуры калибровки создает связь координат с поворотной видеокамерой.

По информации от разработчика, количество обзорных камер в системе видеонаблюдения может быть неограниченным и связанным с размером контролируемой зоны. Например, чтобы обеспечить обзор в 360 град., рекомендуется установить 4 обзорные и 1 поворотную камеры.

2. В продукте "Интеллект" компании ITV | AxxonSoft может быть реализовано PTZ-слежение при помощи многозонного детектора движения обзорной камеры без автоматизации процесса калибровки. Для этого необходимо выполнить шаги:

1. разбить кадр обзорной камеры на множество зон детектирования движения;
2. запрограммировать соответствующие предпозиции на PTZ-камере;
3. написать скрипт, который будет устанавливать PTZ-камеру в предпозицию, соответствующую зоне движения.

Для PTZ-слежения в условиях движения двух и более целей необходима реализация более сложной логики при помощи скрипта или компонента ActiveX.

3. Компания "Синезис" работает над реализацией PTZ-слежения с многозонным детектором движения и аналитическим преобразованием координат в видеоаналитическом устройстве MagicBox. В текущей версии прошивки устройства передача метаданных с координатами целей и управления приводом PTZ осуществляется в рамках международного стандарта ONVIF, что позволяет реализовать внешнюю логику управления PTZ-камеры. Приложение "Менеджер устройств ONVIF"6 распространяемое в открытом коде, иллюстрирует взаимодействие клиента ONVIF с PTZ-камерой и видеоаналитическим сервисом (рис. 4).

Наряду с перечисленными отечественными продуктами существуют системы PTZ-слежения зарубежных поставщиков, которые на российском рынке встречаются редко.

Направления развития технологий

Технологии автоматического управления роботизированной PTZ-камерой на основе данных видеоаналитики и других сенсоров находятся на раннем этапе своего развития. На российском рынке представлены VMS-системы компаний DSSL и ITV | AxxonSoft, а также автономное устройство MagicBox компаний "Агрегатор" и "Синезис", позволяющие автоматизировать работу PTZ-камеры.
Отметим перспективные направления для совершенствования этих продуктов:

1. реализация алгоритмов для работы с несколькими целями при помощи нескольких PTZ-камер в едином пространстве обзорных камер;
2. проработка полуавтоматического режима – например, когда оператор начинает следить за одной целью, система должна использовать свободные PTZ-камеры для слежения за другими целями;
3. упрощение процесса первоначальной настройки (калибровки) системы и оптимизация пользовательского интерфейса для работы в автоматическом и полуавтоматическом режимах PTZ-слежения.

Опубликовано: Журнал "Системы безопасности" #4, 2011
Посещений: 18483

Автор Филипенко Р. А. Инженер-программист ООО "Синезис" Всего статей:  1

Автор Ермолаев И. Е. Начальник отдела машинного зрения ООО "Синезис" Всего статей:  2

Автор Птицын Н. В. Генеральный директор ООО "Синезис" Всего статей:  33

В рубрику "Видеонаблюдение (CCTV)" | К списку рубрик  |  К списку авторов  |  К списку публикаций