Видео синопсис


Синопсис видео — это метод автоматического синтеза краткого информативного резюме видео. В отличие от традиционного обобщения видео , синопсис состоит не только из кадров исходного видео. [1] Алгоритм обнаруживает, отслеживает и анализирует движущиеся объекты (также называемые событиями) в базе данных объектов и действий. [2] Конечным результатом является новый короткий видеоклип, в котором объекты и действия, которые первоначально происходили в разное время, отображаются одновременно, чтобы передать информацию в кратчайшие сроки. Видеосинопсис имеет специфическое применение в области видеоаналитики и видеонаблюдения .где, несмотря на технологические достижения и растущий рост использования камер видеонаблюдения (замкнутого телевидения), [3] просмотр и анализ записанных материалов по-прежнему является дорогостоящей трудоемкой и трудоемкой задачей.

Когда требуется сводка, все объекты из целевого периода собираются и сдвигаются во времени, чтобы создать гораздо более короткий синопсис видео, показывающий максимальную активность. В режиме реального времени создается синопсис видеоклипа , в котором одновременно отображаются объекты и действия, которые первоначально происходили в разное время. [4]

Процесс начинается с обнаружения и отслеживания интересующих объектов. Каждый объект представлен в виде трубки в пространстве-времени всех видеокадров. Объекты обнаруживаются и сохраняются в базе данных примерно в реальном времени.

После запроса на подведение итогов за период все объекты за желаемое время извлекаются из базы данных и индексируются для создания гораздо более короткого сводного видео с максимальной активностью.

Рендеринг в реальном времени используется для создания сводного видео после повторной синхронизации объекта. Это позволяет конечному пользователю контролировать плотность объектов/событий.

Технология видеосинопсиса была изобретена профессором Шмуэлем Пелегом [5] из Еврейского университета в Иерусалиме, Израиль , и разрабатывается по коммерческой лицензии компанией BriefCam, Ltd. [6] BriefCam получила лицензию на использование технологии от Yissum , которая является владелец зарегистрированных патентов на технологию. В мае 2018 года компания BriefCam была приобретена японским гигантом цифровых изображений Canon Inc. примерно за 90 миллионов долларов. [7] Инвесторами компании являются Motorola Solutions Venture Capital, Aviv Venture Capital и OurCrowd . [8]


Пример синопсиса видео: 9 часов деятельности, суммированные в 20-секундном одновременном представлении нескольких объектов и действий, которые происходили в разное время.
Упаковка трубок — схематический пример: создание сводки видео путем повторной синхронизации пространственно-временных трубок ( X представляет собой двумерную ось XY каждого кадра).
Еще один пример синопсиса видео