Войти
Анализ видеоконтента (также видеоконтент analytics, VCA ) - это возможность автоматического анализа видео для обнаружения и определения временных и пространственных событий.
Эта техническая возможность используется в широком диапазоне областей, включая развлечения, поиск видео и просмотр видео, здравоохранение, розничная торговля, автомобилестроение, транспорт, домашняя автоматизация, обнаружение пламени и дыма, охрана и безопасность. Алгоритмы могут быть реализованы как программное обеспечение на машинах общего назначения или как аппаратное обеспечение в специализированных блоках обработки видео.
В VCA может быть реализовано множество различных функций. Видеообнаружение движения - одна из самых простых форм, при которой движение обнаруживается относительно фиксированной фоновой сцены. Более продвинутые функции включают в себя отслеживание видео и оценку движения.
На основе внутреннего представления, которое VCA создает в машине, можно создать другие функции, такие как идентификация, анализ поведения или другие формы осведомленность о ситуации.
VCA полагается на хорошее входное видео, поэтому его часто комбинируют с такими технологиями улучшения видео, как шумоподавление видео, стабилизация изображения, нерезкое маскирование и сверхвысокое разрешение.
В нескольких статьях дается обзор модулей, участвующих в разработке приложений видеоаналитики. Это список известных функций и краткое описание.
| Функция | Описание |
|---|---|
| Динамическое маскирование | Блокирование части видеосигнала на основе самого сигнала, например, из соображений конфиденциальности. |
| Обнаружение пламени и дыма | IP-камеры с интеллектуальной технологией видеонаблюдения могут использоваться для обнаружения пламени и дыма за 15–20 секунд или даже быстрее благодаря встроенному чипу DSP. Чип обрабатывает алгоритмы, которые анализируют записанные видео на предмет характеристик пламени и дыма, таких как цветность, коэффициент мерцания, форма, узор и направление движения. |
| Оценка эмоции | Оценка эмоции используется для определения местоположения камеры путем анализа ее выходного сигнала. |
| Обнаружение движения | Обнаружение движения используется для определения наличия соответствующего движения в наблюдаемой сцене. |
| Распознавание формы | Распознавание формы используется для распознавания форм во входном видео, например кругов или квадратов. Эта функция обычно используется в более сложных функциях, таких как обнаружение объектов. |
| Обнаружение объекта | Обнаружение объекта используется для определения наличия определенного типа объекта или сущности, например человека или автомобиля. Другие примеры включают обнаружение огня и дыма. |
| Распознавание | Распознавание лиц и Автоматическое распознавание номерных знаков используются для распознавания и, следовательно, возможной идентификации людей или автомобилей. |
| Определение стиля | Определение стиля используется в настройках, где видеосигнал был создан, например, для телевизионного вещания. Обнаружение стиля определяет стиль производственного процесса. |
| Обнаружение несанкционированного доступа | Обнаружение несанкционированного доступа используется для определения того, является ли камера или выходной сигнал искаженными. |
| Видео отслеживания | Видео отслеживание используется для определения местоположения людей или объектов в видеосигнале, возможно, в связи с внешней опорной сеткой. |
| Анализ уровня ошибок видео | Анализ фальсификации содержимого видео сцены с использованием бесплатного программного обеспечения. Видео Анализ уровня ошибок (VELA) |
| Совместная сегментация объектов | Совместное обнаружение объектов, классификация и сегментация целей в одной или нескольких связанных видеопоследовательностях |
VCA - относительно новая технология, и в середине 2000-х многие компании выпустили продукты с улучшенной VCA. Хотя существует множество приложений, послужной список различных решений VCA сильно различается. Такие функции, как обнаружение движения, подсчет людей и обнаружение оружия, доступны в виде готовых коммерческих продуктов и считаются имеющими достойную репутацию (для Например, даже бесплатное программное обеспечение, такое как dsprobotics Flowstone, может обрабатывать анализ движения и цвета). В ответ на пандемию COVID-19 многие производители программного обеспечения внедрили новую аналитику общественного здравоохранения, такую как обнаружение маски для лица или отслеживание социального дистанцирования.
Во многих областях VCA реализуется в системах CCTV, либо распределенных по камерам (на периферии), либо централизованных в выделенных системах обработки. Видеоаналитика и Smart CCTV являются коммерческими терминами VCA в области безопасности. В Великобритании разработано вводное руководство для VCA в области безопасности. В дополнение к видеоаналитике и в дополнение к ней можно также использовать аудиоаналитику.
Производители программного обеспечения для управления видео постоянно расширяют диапазон доступных модулей видеоаналитики. С новой технологией отслеживания подозреваемых можно легко отслеживать все движения этого объекта: откуда они пришли, когда, где и как двигались. В рамках конкретной системы наблюдения технология индексации может обнаруживать людей со схожими характеристиками, которые находились в пределах видимости камер в течение или в течение определенного периода времени. Обычно система находит много разных людей с похожими функциями и представляет их в виде снимков. Оператору нужно щелкнуть только те изображения и объекты, которые необходимо отслеживать. В течение минуты или около того можно отслеживать все движения конкретного человека и даже создавать пошаговое видео движений.
Kinect - это дополнительное периферийное устройство для игровой консоли Xbox 360, которое использует VCA для части пользовательского ввода.
В розничной торговле VCA используется для отслеживания покупателей внутри магазина. Таким образом, можно получить тепловую карту магазина, что полезно для дизайна магазина и оптимизации маркетинга. Другие приложения включают время ожидания при просмотре продуктов и обнаружение удаленного / оставленного элемента.
Качество VCA в коммерческих условиях определить сложно. Это зависит от многих переменных, таких как вариант использования, реализация, конфигурация системы и вычислительная платформа. Типичные методы получения объективного представления о качестве в коммерческих условиях включают независимый сравнительный анализ и назначенные места проведения испытаний.
VCA использовалась для управления толпой, особенно на The O2 Arena в Лондоне и London Eye.
Полиция и криминалисты анализируют видеонаблюдение при расследовании преступной деятельности. Полиция использует программное обеспечение, такое как Kinesense, которое выполняет анализ видеоконтента для поиска ключевых событий на видео и поиска подозреваемых. Опросы показали, что до 75% случаев связаны с видеонаблюдением. Полиция использует программное обеспечение для анализа видеоконтента для поиска важных событий в длинных видеороликах.
Анализ видеоконтента - это подмножество компьютерного зрения и, следовательно, искусственного интеллект. Две основные инициативы в области академических тестов: использование небольшой части видеоматериалов i-LIDS и тестовые данные PETS. Они сосредоточены на таких функциях, как отслеживание, обнаружение оставленного багажа и виртуальное ограждение. Тестовые наборы видеоданных, такие как UCF101, позволяют проводить исследования распознавания действий, включающие временное и пространственное визуальное внимание с сверточная нейронная сеть и долговременная кратковременная память. Программное обеспечение для анализа видео также сочетается с кадрами с носимых на теле и камер на приборной панели, чтобы упростить редактирование отснятого материала для публичного раскрытия и выявления событий и людей на видео.
ЕС финансирует проект FP7 под названием P-REACT для интеграции аналитики видеоконтента во встроенных системах с базами данных полиции и безопасности транспорта.
