В контексте взаимодействия человека и компьютера , A модальности является классификация одного независимого канала сенсорного ввода / вывода между компьютером и человеком. [1] Система считается унимодальной, если в ней реализована только одна модальность, и мультимодальной, если у нее более одного. [1] Когда для некоторых задач или аспектов задачи доступны несколько модальностей, считается, что система имеет перекрывающиеся модальности. Если для задачи доступны несколько модальностей, говорят, что система имеет избыточные модальности. Несколько модальностей могут использоваться в комбинации для предоставления дополнительных методов, которые могут быть избыточными, но более эффективно передавать информацию. [2] Модальности обычно можно определить в двух формах: модальности человек-компьютер и компьютер-человек.
Компьютерно-человеческие модальности
Компьютеры используют широкий спектр технологий для связи и отправки информации людям:
- Общие методы
- Необычные методы
- Вкус (вкус)
- Обоняние (запах)
- Термоцепция (тепло)
- Ноцицепция (боль)
- Эквилибриоцепция (баланс)
Любой человеческий смысл можно использовать как компьютерную модальность для человека. Однако наиболее часто используются способы зрения и слуха , поскольку они способны передавать информацию с более высокой скоростью, чем другие способы, от 250 до 300 [3] и от 150 до 160 [4] слов в минуту , соответственно. Хотя тактика обычно не реализуется как компьютерно-человеческая модальность, тактика может достигать в среднем 125 слов в минуту [5] за счет использования обновляемого дисплея Брайля . Другими более распространенными формами тактики являются вибрации смартфона и игрового контроллера.
Человеко-компьютерные модели
Компьютеры могут быть оснащены различными типами устройств ввода и датчиков, чтобы они могли получать информацию от людей. Общие устройства ввода часто взаимозаменяемы, если они имеют стандартизированный метод связи с компьютером и позволяют пользователю вносить практические изменения. Некоторые методы могут обеспечить более богатое взаимодействие в зависимости от контекста, а наличие вариантов реализации позволяет создавать более надежные системы. [6]
- Простые методы
- Комплексные методы
С ростом популярности смартфонов широкая публика все больше привыкает к более сложным модальностям. Распознавание речи было основным преимуществом iPhone 4S и последующих продуктов Apple с появлением Siri . [7] Эта технология дает пользователям альтернативный способ общения с компьютерами, когда печатать на клавиатуре менее желательно. Однако в шумной обстановке метод прослушивания не совсем эффективен. Это показывает, насколько сильные стороны определенных модальностей различаются в зависимости от ситуации. [8] Другие сложные методы , такие как компьютерное видение в виде Microsoft «s Kinect или других подобных технологий могут сделать сложные задачи проще общаться с компьютером , особенно в виде трехмерного движения. [9]
Использование нескольких модальностей
Наличие нескольких модальностей в системе дает больше возможностей для пользователей и может способствовать созданию более надежной системы. Наличие большего количества также обеспечивает большую доступность для пользователей, которые более эффективно работают с определенными модальностями. Когда определенные формы коммуникации невозможны, можно использовать несколько способов. Это особенно верно в случае избыточных модальностей, в которых два или более модальностей используются для передачи одной и той же информации. Определенные комбинации модальностей могут добавить к выражению взаимодействия компьютер-человек или человек-компьютер, потому что каждая из модальностей может быть более эффективной при выражении одной формы или аспекта информации, чем другие.
Существует шесть типов сотрудничества между модальностями, и они помогают определить, как комбинация или слияние модальностей работают вместе для более эффективной передачи информации. [10]
- Эквивалентность: информация представлена несколькими способами и может быть интерпретирована как одна и та же информация.
- Специализация: когда определенный вид информации всегда обрабатывается одним и тем же способом.
- Избыточность: несколько модальностей обрабатывают одну и ту же информацию
- Комплементарность: несколько модальностей берут отдельную информацию и объединяют ее
- Передача: модальность производит информацию, которую потребляет другая модальность.
- Параллелизм: несколько модальностей принимают отдельную информацию, которая не объединяется
Комплементарно-избыточные системы - это системы, которые имеют несколько датчиков для формирования одного понимания или набора данных, и чем эффективнее информация может быть объединена без дублирования данных, тем эффективнее взаимодействуют методы. Наличие нескольких способов связи является обычным явлением, особенно в смартфонах, и часто их реализации работают вместе для достижения одной и той же цели, например гироскопы и акселерометры, работающие вместе для отслеживания движения. [10]
Смотрите также
Рекомендации
- ^ a b Каррей, Фахреддин; Алемзаде, Милад; Салех, Джамиль Абу; Араб, Мо Нур (март 2008 г.). «Взаимодействие человека и компьютера: обзор современного состояния» (PDF) . Международный журнал по интеллектуальному зондированию и интеллектуальным системам . 1 (1). Архивировано из оригинального (PDF) 30 апреля 2015 года . Проверено 21 апреля 2015 года .
- ^ Паланке, Филипп; Патерно, Фабио (2001). Интерактивные системы. Дизайн, спецификация и проверка . Springer Science & Business Media. С. 43 . ISBN 9783540416630.
- ^ Ziefle, M (декабрь 1998 г.). «Влияние разрешения дисплея на визуальные характеристики». Человеческий фактор . 40 (4): 554–68. DOI : 10.1518 / 001872098779649355 . PMID 9974229 .
- Перейти ↑ Williams, JR (1998). Руководство по использованию мультимедиа в обучении, Труды 42-го ежегодного собрания Общества по человеческому фактору и эргономике, 1447–1451 гг.
- ^ «Брайль» . ACB . Американский совет слепых . Проверено 21 апреля 2015 года .
- ^ Бейнбридж, Уильям (2004). Беркширская энциклопедия взаимодействия человека и компьютера . ООО «Издательская группа Беркшир». п. 483. ISBN. 9780974309125.
- ^ Эпштейн, Зак (2 ноября 2011 г.). «Говорят, что Siri является движущей силой огромных продаж iPhone 4S» . Проверено 21 апреля 2015 года .
- ^ Курковский, Стан (2009). Мультимодальность в мобильных вычислениях и мобильных устройствах: методы адаптируемого использования . IGI Global. С. 210–211. ISBN 9781605669793.
- ^ Куросу, Масааки (2013). Взаимодействие человека и компьютера: способы и методы взаимодействия . Springer. п. 366. ISBN. 9783642393303.
- ^ а б Грифони, Патриция (2009). Мультимодальное взаимодействие человека с компьютером и повсеместные услуги . IGI Global. п. 37. ISBN 9781605663876.