Просмотр видео , также известный как исследовательский поиск видео , представляет собой интерактивный процесс беглого просмотра видеоконтента для удовлетворения некоторой потребности в информации или для интерактивной проверки актуальности видеоконтента. Хотя изначально предлагалось помочь пользователям просматривать отдельное видео с помощью визуальных миниатюр [1], современные инструменты просмотра видео позволяют пользователям быстро находить нужную информацию в видеоархиве с помощью итеративного взаимодействия человека с компьютером с помощью исследовательского подхода к поиску . [2] [3]Многие из этих инструментов предполагают наличие умного пользователя, которому нужны функции для интерактивной проверки видеоконтента, а также функции автоматической фильтрации контента. Для этой цели обычно предоставляется несколько функций взаимодействия с видео [4] , таких как сложная навигация по видео или поиск по запросу на основе содержимого . Инструменты просмотра видео часто основываются на анализе видеоконтента более низкого уровня , таком как обнаружение перехода кадра, извлечение ключевых кадров, обнаружение семантических концепций, и создают обзор структурированного содержимого видеофайла или видеоархива. Кроме того, они обычно предоставляют сложные функции навигации, такие как расширенные временные шкалы, [5]визуальные панели поиска или список выбранных миниатюр, а также средства для запроса контента. Примеры запросов контента - это фильтрация кадров с помощью визуальных концепций (например, только кадры, показывающие автомобили), с помощью некоторых конкретных характеристик (например, цветная фильтрация или фильтрация движения), с помощью эскизов, предоставленных пользователем (например, визуально нарисованный эскиз), или с помощью контента: поиск на основе подобия.
История [ править ]
Просмотр видео был первоначально предложен иранским инженером Фаршидом Арманом, тайваньским ученым-компьютерщиком Ардингом Хсу и ученым-компьютерщиком Минг-Йи Чиу, когда он работал в Siemens , и был представлен на Международной конференции ACM в августе 1993 года. [1] [6] Они. описал алгоритм обнаружения кадров для сжатого видео, которое изначально было закодировано с использованием стандартов кодирования видео с дискретным косинусным преобразованием (DCT), таких как JPEG , MPEG и H.26x.. Основная идея заключалась в том, что, поскольку коэффициенты DCT математически связаны с пространственной областью и представляют содержимое каждого кадра, их можно использовать для обнаружения различий между видеокадрами. В алгоритме подмножество блоков в кадре и подмножество DCT-коэффициентов для каждого блока используются в качестве представления вектора движения для кадра. Работая со сжатыми представлениями DCT, алгоритм значительно снижает вычислительные требования для распаковки и обеспечивает эффективный просмотр видео. [7] Алгоритм представляет отдельные кадры видеопоследовательности с помощью r-кадра, эскиза кадра, обрамленного областью отслеживания движения. Вариант этой концепции позже был принят для QBIC.мозаики видеоконтента, где каждый r-кадр представляет собой заметный кадр из кадра, который он представляет. [8]
Разборки в браузере видео [ править ]
Video Browser Showdown (VBS) [9] - это ежегодное соревнование по оценке в реальном времени инструментов исследовательского поиска видео, в котором международные исследователи используют инструменты просмотра видео для максимально быстрого решения специальных задач поиска видео на умеренно большом наборе данных. Основная цель VBS, которая началась в 2012 году на Международной конференции по моделированию мультимедиа (MMM), - повысить производительность инструментов просмотра видео. С 2016 года VBS также сотрудничает с TRECVID. [10]
Ссылки [ править ]
- ^ а б Арман, Фаршид; Депомье, Реми; Сюй, Ардинг; Чиу, Мин-Йи (октябрь 1994 г.). «Контентный просмотр видеопоследовательностей» . Труды Второй Международной конференции ACM по мультимедиа . Ассоциация вычислительной техники : 97–103. DOI : 10.1145 / 192593.192630 . ISBN 0897916867.
- ^ Поддержка исследовательского поиска в видеотеке: когда раскадровки недостаточно. MG Christel. 2008 г.
- ^ Video Explorer - инструмент для навигации и поиска в пределах одного видео, основанный на быстром анализе контента. К. Шёффманн, М. Ташвер и Л. Бозоэрменьи. 2010 г.
- ^ Инструменты взаимодействия с видео: обзор последних работ. К. Шеффманн, М.А. Худелист и Дж. Хубер. 2015 г.
- ^ Интерфейсы для просмотра мобильного видео на основе временной шкалы. В. Хюрст и К. Майер. 2008 г.
- ^ Arman, Farshid; Сюй, Ардинг; Чиу, Мин-Йи (август 1993 г.). «Обработка изображений на сжатых данных для больших баз видеоданных» . Труды Первой Международной конференции ACM по мультимедиа . Ассоциация вычислительной техники : 267–272. DOI : 10.1145 / 166266.166297 . ISBN 0897915968.
- ^ Чжан, Хунцзян (1998). «Просмотр и поиск видео на основе содержимого» . In Furht, Borko (ред.). Справочник Интернет и мультимедийных систем и приложений . CRC Press . С. 83–108 (89) . ISBN 9780849318580.
- ^ Стил, Майкл; Hearst, Marti A .; Лоуренс, А. Роу (1998). «Video Workbench: интерфейс прямого управления для редактирования цифровых медиа видеооператорами-любителями» (PDF) . Semantic Scholar : 1-19 (14) . Проверено 18 октября 2019 .
- ^ Разборки в браузере видео
- ^ TRECVID , инициатива по научным тестам NIST
