Распознавание жестов - это тема в компьютерных науках и языковых технологиях, цель которой - интерпретировать человеческие жесты с помощью математических алгоритмов . [1] Это одна из дисциплин компьютерного зрения . Жесты могут происходить из любого движения или состояния тела, но обычно исходят от лица или руки . Текущее [ когда? ] специализируется на распознавании эмоций на основе распознавания лиц и жестов рук. Пользователи могут использовать простые жесты для управления устройствами или взаимодействия с ними, не касаясь их физически. Многие подходы были сделаны с использованием камер иалгоритмы компьютерного зрения для интерпретации языка жестов . Однако идентификация и распознавание позы, походки, проксемики и человеческого поведения также является предметом методов распознавания жестов. [2] Распознавание жестов можно рассматривать как способ для компьютеров начать понимать язык человеческого тела , тем самым создавая более прочный мост между машинами и людьми, чем примитивные текстовые пользовательские интерфейсы или даже GUI (графические пользовательские интерфейсы), которые по-прежнему ограничивают большинство вводить данные с клавиатуры и мыши и взаимодействовать естественно без каких-либо механических устройств. Используя концепцию распознавания жестов, можно указать пальцем, в этот момент он будет перемещаться соответствующим образом. Это может сделать обычный ввод на устройствах таким и даже избыточным.
Обзор
Особенности распознавания жестов:
- Более точным
- Высокая стабильность
- Экономия времени на разблокировку устройства
Основные области применения распознавания жестов в настоящее время [ когда? ] сценарии:
- Автомобильный сектор
- Сектор бытовой электроники
- Транзитный сектор
- Игровой сектор
- Разблокировать смартфоны
- Защита [3]
- Домашняя автоматизация
- Автоматический перевод на язык жестов [4]
Распознавание жестов может быть выполнено с помощью методов компьютерного зрения и обработки изображений . [5]
Литература включает текущую работу в области компьютерного зрения по улавливанию жестов или более общей позы человека и движений с помощью камер, подключенных к компьютеру. [6] [7] [8] [9]
Распознавание жестов и перьевые вычисления: перьевые вычисления снижают влияние оборудования на систему, а также расширяют диапазон объектов физического мира, которые можно использовать для управления, помимо традиционных цифровых объектов, таких как клавиатуры и мыши. Такие реализации могут позволить создать новый диапазон оборудования, для которого не требуются мониторы. Эта идея может привести к созданию голографического дисплея. Термин распознавание жестов используется для более узкого обозначения символов рукописного ввода без ввода текста, таких как рукописный ввод на графическом планшете , мультитач- жесты и распознавание жестов мыши . Это взаимодействие с компьютером посредством рисования символов курсором указывающего устройства. [10] [11] [12] (см. Pen computing )
Типы жестов
В компьютерных интерфейсах различают два типа жестов: [13] Мы рассматриваем онлайн-жесты, которые также можно рассматривать как прямые манипуляции, такие как масштабирование и вращение. Напротив, офлайн-жесты обычно обрабатываются после завершения взаимодействия; например, нарисован круг для активации контекстного меню .
- Автономные жесты: те жесты, которые обрабатываются после взаимодействия пользователя с объектом. Примером может служить жест для активации меню.
- Онлайн-жесты: жесты прямого управления. Они используются для масштабирования или поворота материального объекта.
Бесконтактный интерфейс
Бесконтактный пользовательский интерфейс - это новая технология, связанная с управлением жестами. Бесконтактный пользовательский интерфейс (TUI) - это процесс управления компьютером с помощью движений тела и жестов без касания клавиатуры, мыши или экрана. [14] Бесконтактный интерфейс в дополнение к управлению жестами становится широко популярным, поскольку он предоставляет возможность взаимодействовать с устройствами, не касаясь их физически.
Типы бесконтактных технологий
Существует ряд устройств, использующих этот тип интерфейса, например смартфоны, ноутбуки, игры, телевидение и музыкальное оборудование.
Один из типов бесконтактного интерфейса использует Bluetooth-соединение смартфона для активации системы управления посетителями компании. Это избавляет от необходимости прикасаться к интерфейсу во время пандемии COVID-19 . [15] [16]
Устройства ввода
Способность отслеживать движения человека и определять, какие жесты они могут выполнять, может быть достигнута с помощью различных инструментов. Кинетические пользовательские интерфейсы (KUI) - это развивающийся тип пользовательских интерфейсов, которые позволяют пользователям взаимодействовать с вычислительными устройствами посредством движения объектов и тел. [ необходима цитата ] Примеры KUI включают в себя осязаемые пользовательские интерфейсы и игры с поддержкой движения, такие как Wii и Microsoft Kinect , а также другие интерактивные проекты. [17]
Несмотря на то, что в области распознавания жестов на основе изображений / видео было проведено большое количество исследований, существуют некоторые различия в инструментах и средах, используемых между реализациями.
- Проволочные перчатки . Они могут обеспечивать ввод в компьютер информации о положении и вращении рук с использованием магнитных или инерциальных устройств слежения. Кроме того, некоторые перчатки могут обнаруживать сгибание пальцев с высокой степенью точности (5-10 градусов) или даже обеспечивать тактильную обратную связь с пользователем, которая имитирует осязание. Первым коммерчески доступным устройством типа перчатки для отслеживания рук было DataGlove, [18] устройство типа перчатки, которое могло определять положение руки, движение и сгибание пальцев. Для этого используются оптоволоконные кабели, идущие по тыльной стороне ладони. Создаются световые импульсы, и когда пальцы сгибаются, свет просачивается через небольшие трещины, и регистрируется потеря, что дает приблизительное представление о позе руки.
- Камеры с функцией определения глубины. Используя специализированные камеры, такие как структурированный свет или времяпролетные камеры , можно создать карту глубины того, что видно через камеру на близком расстоянии, и использовать эти данные для приближения к трехмерному представлению того, что видят. Они могут быть эффективны для обнаружения жестов рук из-за их короткого действия. [19]
- Стереокамеры . Используя две камеры, отношение которых друг к другу известно, можно аппроксимировать трехмерное представление по выходным сигналам камер. Чтобы получить соотношение камер, можно использовать ссылку позиционирования, такую как лексическая полоса или инфракрасные излучатели. [20] В сочетании с прямым измерением движения ( 6D-Vision ) жесты могут быть обнаружены напрямую.
- Контроллеры на основе жестов. Эти контроллеры действуют как продолжение тела, поэтому при выполнении жестов часть их движения может быть удобно зафиксирована программным обеспечением. Примером зарождающегося захвата движения на основе жестов является отслеживание движения руки скелета , которое разрабатывается для приложений виртуальной и дополненной реальности. Пример этой технологии демонстрируют компании отслеживания uSens и Gestigon , которые позволяют пользователям взаимодействовать со своим окружением без контроллеров. [21] [22]
- Обнаружение Wi-Fi [23]
Другим примером этого является отслеживание жестов мыши , когда движение мыши соотносится с символом, нарисованным рукой человека, который может изучать изменения ускорения с течением времени для представления жестов. [24] [25] [26] Программное обеспечение также компенсирует тремор человека и непреднамеренное движение. [27] [28] [29] Датчики этих интеллектуальных светоизлучающих кубов могут использоваться для обнаружения рук и пальцев, а также других объектов поблизости и могут использоваться для обработки данных. Большинство приложений находятся в синтезе музыки и звука [30], но могут применяться и в других областях.
- Одиночная камера . Стандартная 2D-камера может использоваться для распознавания жестов, если ресурсы / среда не подходят для других форм распознавания на основе изображений. Ранее считалось, что одиночная камера может быть не так эффективна, как стереофонические камеры или камеры с функцией определения глубины, но некоторые компании оспаривают эту теорию. Программная технология распознавания жестов с использованием стандартной 2D-камеры, которая может распознавать надежные жесты рук.
Алгоритмы
В зависимости от типа входных данных подход к интерпретации жеста может быть различным. Однако большинство методов полагаются на ключевые указатели, представленные в трехмерной системе координат. На основе их относительного движения жест может быть обнаружен с высокой точностью, в зависимости от качества ввода и подхода алгоритма.
Чтобы интерпретировать движения тела, нужно классифицировать их в соответствии с общими свойствами и сообщениями, которые движения могут выражать. Например, на языке жестов каждый жест представляет собой слово или фразу.
В некоторой литературе различают 2 разных подхода к распознаванию жестов: на основе 3D-модели и на основе внешнего вида. [31] Самый передовой метод использует трехмерную информацию о ключевых элементах частей тела, чтобы получить несколько важных параметров, таких как положение ладони или углы суставов. С другой стороны, системы, основанные на внешнем виде, используют изображения или видео для прямой интерпретации.
Алгоритмы на основе 3D-моделей
Подход с использованием трехмерной модели может использовать объемные или скелетные модели или даже их комбинацию. Объемные подходы широко используются в индустрии компьютерной анимации и для целей компьютерного зрения. Модели обычно создаются из сложных трехмерных поверхностей, таких как NURBS или полигональные сетки.
Недостатком этого метода является то, что он требует больших вычислительных ресурсов, а системы для анализа в реальном времени еще не разработаны. На данный момент более интересным подходом было бы сопоставление простых примитивных объектов с наиболее важными частями тела человека (например, цилиндры для рук и шеи, сфера для головы) и анализ их взаимодействия друг с другом. Более того, некоторые абстрактные структуры, такие как суперквадрики и обобщенные цилиндры, могут быть даже более подходящими для аппроксимации частей тела.
Скелетные алгоритмы
Вместо интенсивной обработки 3D-моделей и работы с множеством параметров можно просто использовать упрощенную версию параметров угла сочленения вместе с длинами сегментов. Это известно как скелетное представление тела, где вычисляется виртуальный скелет человека и части тела сопоставляются с определенными сегментами. Анализ здесь выполняется с использованием положения и ориентации этих сегментов и отношения между каждым из них (например, угла между суставами и относительного положения или ориентации).
Преимущества использования скелетных моделей:
- Алгоритмы работают быстрее, потому что анализируются только ключевые параметры.
- Возможно сопоставление шаблонов с базой данных шаблонов
- Использование ключевых точек позволяет программе обнаружения сосредоточиться на значительных частях тела.
Модели на основе внешнего вида
Эти модели больше не используют пространственное представление тела, потому что они получают параметры непосредственно из изображений или видео с использованием базы данных шаблонов. Некоторые из них основаны на деформируемых 2D-шаблонах частей тела человека, особенно рук. Деформируемые шаблоны - это наборы точек на контуре объекта, используемые в качестве узлов интерполяции для аппроксимации контура объекта. Одна из простейших функций интерполяции - линейная, которая выполняет усреднение формы на основе наборов точек, параметров изменчивости точек и внешних деформаторов. Эти модели на основе шаблонов в основном используются для отслеживания рук, но также могут быть полезны для простой классификации жестов.
Второй подход к обнаружению жестов с использованием моделей на основе внешнего вида использует последовательности изображений в качестве шаблонов жестов. Параметрами для этого метода являются либо сами изображения, либо определенные функции, полученные на их основе. В большинстве случаев используются только один (моноскопический) или два (стереоскопический) вид.
Электромиографические модели
Электромиография (ЭМГ) касается изучения электрических сигналов, производимых мышцами тела. Посредством классификации данных, полученных от мышц руки, можно классифицировать действие и, таким образом, ввести жест во внешнее программное обеспечение. [1] Потребительские ЭМГ-устройства позволяют использовать неинвазивные методы, такие как повязка на руку или ногу, и подключаются через Bluetooth. В связи с этим ЭМГ имеет преимущество перед визуальными методами, поскольку пользователю не нужно смотреть в камеру для ввода данных, что обеспечивает большую свободу движений.
Вызовы
Есть много проблем, связанных с точностью и полезностью программного обеспечения для распознавания жестов. Для распознавания жестов на основе изображений существуют ограничения по используемому оборудованию и шуму на изображении . Изображения или видео могут быть не при постоянном освещении или в одном и том же месте. Предметы на заднем плане или отличительные особенности пользователей могут затруднить распознавание.
Разнообразие реализаций распознавания жестов на основе изображений также может вызвать проблемы с жизнеспособностью технологии для общего использования. Например, алгоритм, откалиброванный для одной камеры, может не работать для другой камеры. Уровень фонового шума также вызывает трудности с отслеживанием и распознаванием, особенно при возникновении окклюзии (частичной и полной). Кроме того, расстояние до камеры, разрешение и качество камеры также влияют на точность распознавания.
Чтобы фиксировать человеческие жесты с помощью визуальных датчиков, также требуются надежные методы компьютерного зрения, например, для отслеживания рук и распознавания положения рук [32] [33] [34] [35] [36] [37] [38] [39 ]. ] [40] или для фиксации движений головы, мимики или направления взгляда.
Социальная приемлемость
Одна из серьезных проблем, связанных с внедрением жестовых интерфейсов на потребительские мобильные устройства, такие как смартфоны и умные часы, связана с социальными последствиями жестового ввода. Хотя жесты могут способствовать быстрому и точному вводу на многих компьютерах с новым форм-фактором, их внедрение и полезность часто ограничиваются социальными факторами, а не техническими. С этой целью разработчики методов ввода с помощью жестов могут стремиться уравновесить как технические соображения, так и готовность пользователя выполнять жесты в различных социальных контекстах. [41] Кроме того, различное оборудование устройства и механизмы распознавания поддерживают различные типы распознаваемых жестов.
Мобильное устройство
Интерфейсы жестов на мобильных устройствах и устройствах малого форм-фактора часто поддерживаются наличием датчиков движения, таких как инерциальные измерительные блоки (IMU). На этих устройствах распознавание жестов полагается на то, что пользователи выполняют жесты на основе движений, которые могут быть распознаны этими датчиками движения. Это потенциально может затруднить захват сигнала от незаметных жестов или жестов с низким движением, поскольку их может быть трудно отличить от естественных движений или шума. Путем опроса и изучения юзабилити жестов исследователи обнаружили, что жесты, которые включают в себя легкие движения, которые кажутся похожими на существующие технологии, выглядят или ощущаются одинаково для всех действий и которые доставляют удовольствие, с большей вероятностью будут приняты пользователями, в то время как жесты, которые выглядят странно, неудобно выполнять, мешает общению или связано с необычным движением, из-за которого пользователи с большей вероятностью откажутся от их использования. [41] Социальная приемлемость жестов мобильных устройств во многом зависит от естественности жеста и социального контекста.
Накладные и носимые компьютеры
Носимые компьютеры обычно отличаются от традиционных мобильных устройств тем, что их место использования и взаимодействия происходит на теле пользователя. В этих контекстах жестовые интерфейсы могут стать предпочтительнее традиционных методов ввода, поскольку их небольшой размер делает сенсорные экраны или клавиатуры менее привлекательными. Тем не менее, когда дело доходит до жестового взаимодействия, они сталкиваются с теми же проблемами социальной приемлемости, что и мобильные устройства. Однако возможность скрытия носимых компьютеров от глаз или их интеграции с другими повседневными предметами, такими как одежда, позволяет вводить жесты для имитации обычных взаимодействий с одеждой, таких как регулировка воротника рубашки или потирание переднего кармана брюк. [42] [43] Основным фактором при взаимодействии с носимым компьютером является место для размещения устройства и взаимодействия с ним. Исследование отношения сторонних лиц к взаимодействию с носимыми устройствами, проведенное в США и Южной Корее, выявило различия в восприятии использования носимых компьютеров у мужчин и женщин, отчасти из-за того, что разные участки тела считаются социально уязвимыми. [43] Другое исследование, посвященное социальной приемлемости проецируемых на теле интерфейсов, показало аналогичные результаты: в обоих исследованиях отмечены области вокруг талии, паха и верхней части тела (для женщин) как наименее приемлемые, в то время как области вокруг предплечья и запястья должны быть неприемлемыми. наиболее приемлемо. [44]
Общественные установки
Общедоступные установки , такие как интерактивные публичные дисплеи, позволяют получить доступ к информации и отображать интерактивные средства массовой информации в общественных местах, таких как музеи, галереи и театры. [45] В то время как сенсорные экраны являются частой формой ввода для публичных дисплеев, интерфейсы жестов обеспечивают дополнительные преимущества, такие как улучшенная гигиена, взаимодействие на расстоянии, улучшенная видимость и могут способствовать перформативному взаимодействию. [42] Важным аспектом взаимодействия жестов с публичными дисплеями является высокая вероятность или ожидания зрительской аудитории. [45]
"Рука гориллы"
«Рука гориллы» была побочным эффектом использования вертикально ориентированного сенсорного экрана или светового пера. В периоды длительного использования руки пользователей начали чувствовать усталость и / или дискомфорт. Этот эффект способствовал упадку сенсорного ввода, несмотря на первоначальную популярность в 1980-х. [46] [47]
Чтобы измерить утомляемость руки и побочный эффект руки гориллы, исследователи разработали метод под названием «Потребляемая выносливость». [48] [49]
Смотрите также
- Распознавание активности
- Оценка позы шарнирного тела
- Автомобильное головное устройство
- Компьютерная обработка языка тела
- Оценка позы в 3D
- Указывающий жест устройства
Рекомендации
- ^ а б Кобыларз, Джонатан; Bird, Jordan J .; Faria, Diego R .; Рибейро, Эдуардо Паренте; Экарт, Анико (07.03.2020). «Недурно: невербальное взаимодействие человека и робота через классификацию ЭМГ в реальном времени с помощью индуктивного и контролируемого трансдуктивного обучения» . Журнал окружающего интеллекта и гуманизированных вычислений . ООО "Спрингер Сайенс энд Бизнес Медиа". DOI : 10.1007 / s12652-020-01852-Z . ISSN 1868-5137 .
- ^ Маттиас Рем, Николаус Би, Элизабет Андре, Волна, как египтянин - распознавание жестов на основе акселерометра для взаимодействия с культурой , Британское компьютерное общество, 2007
- ^ "Отчет о патентном ландшафте Распознавание жестов рук PatSeer Pro" . PatSeer . Проверено 2 ноября 2017 .
- ^ Чай, Сюцзюань и др. « Распознавание языка жестов и перевод с помощью kinect ». IEEE Conf. на AFGR. Vol. 655. 2013.
- ^ Султана A, Rajapuspha T (2012), "Жест видения на основе распознавания для Алфавитного Жесты Использование SVM классификатор" , Международный журнал Computer Science & Engineering Technology (IJCSET)., 2012
- ^ Павлович, В., Шарма, Р. и Хуанг, Т. (1997), "Визуальная интерпретация жестов рук для взаимодействия человека с компьютером: обзор" , IEEE Transactions on Pattern Analysis and Machine Intelligence, июль, 1997. Vol. 19 (7), стр. 677-695.
- ^ Р. Чиполла и А. Пентланд, Компьютерное зрение для взаимодействия человека и машины , Cambridge University Press, 1998, ISBN 978-0-521-62253-0
- ↑ Инь Ву и Томас С. Хуанг, «Распознавание жестов на основе зрения: обзор» Архивировано 25 августа2011 г. в Wayback Machine , В: Связь на основе жестов во взаимодействии человека и компьютера, том 1739 лекционных заметок Springer по компьютеру. Science, страницы 103-115, 1999, ISBN 978-3-540-66935-7 , DOI : 10.1007 / 3-540-46616-9
- ^ Alejandro Jaimes и Нику Sebe, мультимодальные человек-компьютерного взаимодействия: обзор архивации 2011-06-06 в Wayback Machine , Computer Vision и изображения Понимание Том 108, вопросы 1-2, октябрь-ноябрь 2007, страницы 116-134 Специальный выпуск на видение для человеко-машинного взаимодействия, DOI : 10.1016 / j.cviu.2006.10.019
- ^ Dopertchouk, Олег; «Распознавание жестов рукописного ввода» , gamedev.net , 9 января 2004 г.
- ^ Чен, Шицзе; «Методы распознавания жестов в приложении для распознавания рукописного ввода» , Frontiers in Handwriting Recognition, стр. 142-147, ноябрь 2010 г.
- ^ Баладжи, R; Deepu, V; Мадхванатх, Шриганеш; Прабхакаран, Джаясри «Распознавание рукописных жестов для жестовой клавиатуры». Архивировано 6 сентября 2008 г.в Wayback Machine , Hewlett-Packard Laboratories.
- ^ Дитрих Каммер, Мэнди Кек, Георг Фрайтаг, Маркус Вакер, Таксономия и обзор фреймворков Multi-Touch: архитектура, объем и функции. Архивировано 25 января 2011 г. в Wayback Machine.
- ^ «Определение бесконтактного пользовательского интерфейса из энциклопедии журнала PC» . pcmag.com . Проверено 28 июля 2017 .
- ^ «Как COVID 19 может изменить способ работы людей с приложениями для входа в систему» . 22 мая 2020.
- ^ «(PDF) Возникающая потребность в технологиях бесконтактного взаимодействия» . ResearchGate . Проверено 30 июня 2021 .
- ^ С. Бенфорд; Х. Шнадельбах; Б. Колева; Б. Гавер; А. Шмидт; А. Буше; А. Стид; Р. Анастази; К. Гринхалг; Т. Родден; Х. Геллерсен (2003). «Разумно, разумно и желательно: основа для проектирования физических интерфейсов» (PDF) . CiteSeerX 10.1.1.190.2504 . Архивировано из оригинального (PDF) 26 января 2006 года. Цитировать журнал требует
|journal=
( помощь ) - ^ Томас Г. Циммерман, Джарон Ланье, Чак Бланшар, Стив Брайсон и Янг Харвилл. http://portal.acm.org . " УСТРОЙСТВО ИНТЕРФЕЙСА ЖЕСТОВ РУКИ ". http://portal.acm.org .
- ^ Ян Лю, Юнде Цзя, Надежный метод отслеживания рук и распознавания жестов для носимых визуальных интерфейсов и его приложений , Труды Третьей Международной конференции по изображению и графике (ICIG'04), 2004 г.
- ^ Куэ-Бум Ли, Юнг-Hyun Kim, Kwang-Seok Хонг, реализация мультимодальной игры интерфейс , основанный на КПК , Пятая Международная конференция по инженерии программного обеспечения исследований, управления и приложения, 2007
- ^ "Отслеживание жестов Гестигона - нарушение TechCrunch" . TechCrunch . Проверено 11 октября +2016 .
- ^ Матни, Лукас. «uSens демонстрирует новые датчики слежения, которые призваны обеспечить более богатые возможности мобильной виртуальной реальности» . TechCrunch . Проверено 29 августа +2016 .
- ^ Халили, Абдулла; Солиман, Абдель-Хамид; Асадуззаман, штат Мэриленд; Гриффитс, Элисон (март 2020 г.). «Обнаружение Wi ‐ Fi: приложения и проблемы» . Журнал инженерии . 2020 (3): 87–97. DOI : 10,1049 / joe.2019.0790 . ISSN 2051-3305 .
- ^ Пер Мальместиг, Софи Сандберг, SignWiiver - реализация технологии языка жестов. Архивировано 25 декабря 2008 г. в Wayback Machine.
- ^ Томас Шломер, Бенджамин Поппинга, Нильс Хенце, Сюзанна Болл, Распознавание жестов с помощью контроллера Wii , Труды 2-й международной конференции по материальному и встроенному взаимодействию, 2008 г.
- ^ AiLive Inc., LiveMove White Paper архивации 2007-07-13 в Wayback Machine , 2006
- ^ Электронный дизайн 8 сентября 2011 года. Уильям Вонг. Естественный пользовательский интерфейс использует интеграцию датчиков.
- ↑ Cable & Satellite International, сентябрь / октябрь 2011 г. Стивен Казинс. Взгляд к острым ощущениям.
- ^ TechJournal Юг 7 января 2008. Hillcrest Labs кольца до $ 25MD раунд.
- ^ Percussa AudioCubes блог 4 октября 2012 года Управление жестикуляционных в Sound Synthesis. Архивировано 10 сентября 2015 года на Wayback Machine.
- ^ Владимир И. Павлович, Раджив Шарма, Томас С. Хуанг, Визуальная интерпретация жестов рук для взаимодействия человека с компьютером ; Обзор, IEEE Transactions on Pattern Analysis and Machine Intelligence, 1997 г.
- ^ Иван Лаптев и Тони Линдеберг «Отслеживание моделей рук с несколькими состояниями с использованием фильтрации частиц и иерархии многомасштабных характеристик изображения» , Proceedings Scale-Space and Morphology in Computer Vision, Volume 2106 of Springer Lecture Notes in Computer Science, стр. 63 -74, Ванкувер, Британская Колумбия, 1999. ISBN 978-3-540-42317-1 , DOI : 10.1007 / 3-540-47778-0
- ^ фон Харденберг, Кристиан; Берар, Франсуа (2001). «Взаимодействие человека с компьютером голыми руками». Труды семинара 2001 г. по перцептивным пользовательским интерфейсам . Сборник материалов международной конференции ACM. 15 архив. Орландо, Флорида. С. 1–8. CiteSeerX 10.1.1.23.4541 .
- ^ Ларс Бретцнер, Иван Лаптев, Тони Линдеберг «Распознавание жестов рук с использованием многомасштабных цветовых функций, иерархических моделей и фильтрации частиц» , Труды Пятой Международной конференции IEEE по автоматическому распознаванию лиц и жестов, Вашингтон, округ Колумбия, США, 21–21 Май 2002 г., страницы 423-428. ISBN 0-7695-1602-5 , DOI : 10,1109 / AFGR.2002.1004190
- ↑ Домитилла Дель Веккио, Ричард М. Мюррей Пьетро Перона, «Разложение человеческого движения на динамические примитивы с приложением к задачам рисования». Архивировано 02февраля 2010 г.в Wayback Machine , Automatica Volume 39, Issue 12, December 2003, Pages 2085-2098, DOI : 10.1016 / S0005-1098 (03) 00250-4 .
- ^ Томас Б. Moeslund и Lau Nørgaard, «Краткий обзор Жесты используется в носимом человеке компьютерных интерфейсов» Архивированные 2011-07-19 в Вайбаке машина , технический отчет: CVMT 03-02, ISSN 1601-3646 , Лаборатория компьютерного зрения и медиа-технологий, Ольборгский университет, Дания.
- ^ М. Колш и М. Тюрк «Быстрое двухмерное отслеживание рук с множеством функций и интеграцией нескольких сигналов ». Архивировано 21 августа 2008 г.на Wayback Machine , CVPRW '04. Материалы компьютерного зрения и распознаванияWorkshop, 27 мая-2 июня 2004, DOI : 10,1109 / CVPR.2004.71
- ^ Ся Лю Фуджимура, К., «Распознавание жестов руки с использованием данных глубины», Труды Шестой Международной конференции IEEE по автоматическому распознаванию лиц и жестов, 17–19 мая 2004 г., страницы 529-534, ISBN 0-7695-2122-3 , DOI : 10,1109 / AFGR.2004.1301587 .
- ^ Stenger B, Thayananthan A, Torr PH, Cipolla R: «Отслеживание рук на основе модели с использованием иерархического байесовского фильтра» , IEEE Transactions on IEEE Transactions on Pattern Analysis and Machine Intelligence, 28 (9): 1372-84, сентябрь 2006 г.
- ↑ A Erol, G Bebis, M Nicolescu, RD Boyle, X Twombly, «Оценка позы руки на основе зрения: обзор» , Computer Vision and Image Understanding Volume 108, Issues 1-2, October – November 2007, Pages 52-73 Специальный выпуск видения для человеко-машинного взаимодействия, DOI : 10.1016 / j.cviu.2006.10.012 .
- ^ а б Рико, Джули; Брюстер, Стивен (2010). «Используемые жесты для мобильных интерфейсов: оценка социальной приемлемости». Труды конференции SIGCHI по человеческому фактору в вычислительных системах . ЧИ '10. Нью-Йорк, Нью-Йорк, США: ACM: 887–896. DOI : 10.1145 / 1753326.1753458 . ISBN 9781605589299. S2CID 16118067 .
- ^ а б Уолтер, Роберт; Байи, Жиль; Мюллер, Йорг (2013). «StrikeAPose: Выявление жестов в воздухе на публичных дисплеях» . StrikeAPose . Труды конференции SIGCHI по человеческому фактору в вычислительных системах - CHI '13 . Нью-Йорк, Нью-Йорк, США: ACM Press. С. 841–850. DOI : 10.1145 / 2470654.2470774 . ISBN 9781450318990. S2CID 2041073 .
- ^ а б Profita, Halley P .; Клоусон, Джеймс; Гиллиланд, Скотт; Зиглер, Клинт; Старнер, Тад; Бадд, Джим; До, Эллен Йи-Луен (2013). «Не обращайте внимания на мое запястье: пример взаимодействия с телесными технологиями в общественных местах». Труды Международного симпозиума 2013 года носимых компьютеров . ISWC '13. Нью-Йорк, Нью-Йорк, США: ACM: 89–96. DOI : 10.1145 / 2493988.2494331 . ISBN 9781450321273. S2CID 3236927 .
- ^ Харрисон, Крис; Фасте, Хокон (2014). «Последствия местоположения и касания для проецируемых на теле интерфейсов». Материалы конференции 2014 г. по проектированию интерактивных систем . DIS '14. Нью-Йорк, Нью-Йорк, США: ACM: 543–552. DOI : 10.1145 / 2598510.2598587 . ISBN 9781450329026. S2CID 1121501 .
- ^ а б Ривз, Стюарт; Бенфорд, Стив; О'Мэлли, Клэр; Фрейзер, Майк (2005). «Создание зрительского опыта» (PDF) . Труды конференции SIGCHI по человеческому фактору в вычислительных системах - CHI '05 . Нью-Йорк, Нью-Йорк, США: ACM Press: 741. doi : 10.1145 / 1054972.1055074 . ISBN 978-1581139983. S2CID 5739231 .
- ^ Руперт Гудвинс. «Windows 7? В ней нет руки» . ZDNet .
- ^ "рука гориллы" . catb.org .
- ^ Хинкапье-Ramos, JD, Го, X., Moghadasian, П. и ирано. P. 2014. «Потребляемая выносливость: показатель для количественной оценки утомляемости рук при взаимодействии в воздухе» . В материалах 32-й ежегодной конференции ACM по человеческому фактору в вычислительных системах (CHI '14). ACM, Нью-Йорк, Нью-Йорк, США, 1063–1072. DOI = 10.1145 / 2556288.2557130
- ^ Хинкапье-Ramos, JD, Го, X., и ирано, П. 2014. "потребленный Endurance Workbench: Инструмент для оценки Arm усталости во время Mid-Air взаимодействий" . В материалах сопутствующей публикации 2014 г. «Проектирование интерактивных систем» (DIS Companion '14). ACM, Нью-Йорк, Нью-Йорк, США, 109-112. DOI = 10.1145 / 2598784.2602795
Внешние ссылки
- Аннотированная библиография ссылок на жесты и перьевые вычисления
- Заметки по истории перьевых вычислений (YouTube)
- Будущее - это жесты - жестовые интерфейсы и видеоигры
- Жестовая интерактивная реклама Ford - жесты, используемые для взаимодействия с цифровыми вывесками.
- Трехмерное отслеживание рук - обзор литературы