Эта статья нуждается в обновлении . Декабрь 2017 г. ) ( |
Автор (ы) оригинала | |
---|---|
Разработчики) | |
Первый выпуск | 5 июня 2014 г . |
Платформа | Android |
Доступно в | английский |
Тип | Компьютерное зрение |
Веб-сайт | разработчики |
Tango (ранее называвшаяся Project Tango во время тестирования) была вычислительной платформой с дополненной реальностью , разработанной и созданной Advanced Technology and Projects (ATAP), подразделением Google Skunkworks . Он использовал компьютерное зрение, чтобы мобильные устройства , такие как смартфоны и планшеты , могли определять свое положение относительно окружающего мира без использования GPS или других внешних сигналов. Это позволило разработчикам приложений создавать пользовательские интерфейсы, включая внутреннюю навигацию , 3D.картографирование, измерение физического пространства, распознавание окружающей среды, дополненная реальность и окна в виртуальный мир .
Первый продукт выйти из Атапа, [1] Tango был разработан командой под руководством компьютера ученого Джонни Ли , основной вклад в Microsoft «s Kinect . В интервью в июне 2015 года Ли сказал: «Мы разрабатываем аппаратные и программные технологии, чтобы помочь всем и каждому точно понимать, где они находятся и где угодно». [2]
Google произвела два устройства для демонстрации технологии Tango: телефон Peanut и 7-дюймовый планшет Yellowstone. По состоянию на июнь 2015 года [3] было продано более 3000 таких устройств [3], в основном исследователям и разработчикам программного обеспечения, заинтересованным в создании приложений для этой платформы. Летом 2015 года Qualcomm и Intel объявили о разработке эталонных устройств Tango в качестве моделей для производителей устройств, использующих их мобильные чипсеты . [4] [5]
На выставке CES в январе 2016 года Google объявил о партнерстве с Lenovo по выпуску потребительского смартфона летом 2016 года с технологией Tango, предназначенной для потребителей, с ценой менее 500 долларов и малым форм-фактором менее 6,5 дюймов. В то же время обе компании также анонсировали инкубатор приложений для разработки приложений, которые будут размещены на устройстве при запуске.
15 декабря 2017 года Google объявил о прекращении поддержки Tango 1 марта 2018 года в пользу ARCore . [6]
Обзор [ править ]
Tango отличался от других современных продуктов компьютерного зрения с функцией 3D-зондирования тем, что был разработан для работы на автономном мобильном телефоне или планшете и в основном был связан с определением положения и ориентации устройства в окружающей среде.
Программа работала за счет интеграции трех типов функциональности:
- Отслеживание движения : использование визуальных характеристик окружающей среды в сочетании с данными акселерометра и гироскопа для точного отслеживания перемещений устройства в пространстве.
- Изучение области: хранение данных окружающей среды на карте, которую можно повторно использовать позже, поделиться с другими устройствами Tango и дополнить метаданными, такими как заметки, инструкции или достопримечательности.
- Восприятие глубины : определение расстояний, размеров и поверхностей в окружающей среде
Вместе они генерировать данные об устройстве в « шесть степеней свободы » (3 осям от ориентации плюс 3 осей позиции) , и подробно трехмерную информацию об окружающей среде.
Project Tango также стал первым проектом, вышедшим из Google X в 2012 г. [7]
Приложения на мобильных устройствах используют Tango C и Java API для доступа к этим данным в реальном времени. Кроме того, был также предоставлен API для интеграции Tango с игровым движком Unity ; это позволило преобразовывать или создавать игры, которые позволяют пользователю взаимодействовать и перемещаться в игровом пространстве, перемещая и вращая устройство Tango в реальном пространстве. Эти API были задокументированы на веб-сайте разработчика Google. [8]
Приложения [ править ]
Tango позволяет приложениям отслеживать положение и ориентацию устройства в детализированной трехмерной среде и распознавать известные среды. Это позволило создавать такие приложения, как навигация в магазине, утилиты для визуального измерения и картографии, инструменты для презентаций и дизайна [9], а также различные иммерсивные игры. На выставке Augmented World Expo 2015 [10] Джонни Ли продемонстрировал строительную игру, которая создает виртуальную структуру в реальном пространстве, демонстрационное приложение AR , которое позволяет пользователям просматривать виртуальный автомобиль в натуральную величину и настраивать его функции, гибридную пушку Nerf с установленным Экран Tango для уклонения и стрельбы по монстрам AR, наложенным на реальность, и многопользовательский VRприложение, которое позволяет нескольким игрокам общаться в виртуальном пространстве, где движения их аватаров соответствуют их движениям в реальной жизни. [11]
Приложения Tango распространяются через Play . Google поощряет разработку большего количества приложений с помощью хакатонов , конкурсов приложений и рекламных скидок на планшеты для разработки. [12]
Устройства [ править ]
В качестве платформы для разработчиков программного обеспечения и модели для производителей устройств Google создал два устройства Tango.
Телефон Peanut [ править ]
«Peanut» был первым серийным устройством Tango, выпущенным в первом квартале 2014 года. Это был небольшой телефон Android с четырехъядерным процессором Qualcomm MSM8974 и дополнительным специальным оборудованием, включая камеру движения « рыбий глаз» и камеру «RGB-IR» для цветной печати. изображение и инфракрасное обнаружение глубины, а также блоки обработки Movidius Vision . Высокопроизводительный акселерометр и гироскоп были добавлены после тестирования нескольких конкурирующих моделей в лаборатории MARS в Университете Миннесоты .
Несколько сотен устройств Peanut были розданы партнерам по раннему доступу, включая университетских исследователей в области компьютерного зрения и робототехники , а также разработчиков приложений и технологических стартапов . Google прекратил поддержку устройства Peanut в сентябре 2015 года, поскольку к тому времени программный стек Tango вышел за рамки версий Android, работающих на устройстве.
Табличка Йеллоустоуна [ править ]
«Йеллоустон» - 7-дюймовый планшет с полной функциональностью Tango, выпущенный в июне 2014 года и продаваемый как Project Tango Tablet Development Kit. [13] Он оснащен четырехъядерным процессором Nvidia Tegra K1 с тактовой частотой 2,3 ГГц, флэш-памятью 128 ГБ, сенсорным экраном с разрешением 1920 x 1200 пикселей, цветной камерой 4 МП, камерой с объективом «рыбий глаз» (отслеживание движения), ИК-проектором с камерой RGB-IR для интегрированной глубины. зондирование и подключение 4G LTE . [14] [15] По состоянию на 27 мая 2017 года планшет Tango официально не поддерживается Google. [16]
Тестирование НАСА [ править ]
В мае 2014 года два телефона Peanut были доставлены на Международную космическую станцию в рамках проекта НАСА по разработке автономных роботов, которые могут перемещаться в различных средах, включая космическое пространство. 18-гранные многогранные роботы SPHERES размером с футбольный мяч были разработаны в исследовательском центре NASA Ames Research Center , расположенном рядом с кампусом Google в Маунтин-Вью, Калифорния . Андрес Мартинес, менеджер SPHERES в НАСА, сказал: «Мы исследуем, насколько эффективны навигационные возможности [Tango], основанные на видении, для выполнения локализации и навигации мобильного бесплатного летчика на МКС. [17]
Смартфон Intel RealSense [ править ]
Анонсирован на форуме разработчиков Intel в августе 2015 года [18] и представлен публике через Developer Kit с января 2016 года. [19] Он включает камеру RealSense ZR300 [20], которая имеет оптические функции, необходимые для Tango, такие как камера «рыбий глаз». [21]
Lenovo Phab 2 Pro [ править ]
Lenovo Phab 2 Pro был первым коммерческим смартфоном с технологией Tango, устройство было анонсировано в начале 2016 года, запущено в августе и доступно для покупки в США в ноябре. ФАБ 2 Pro имел 6,4 - дюймовый экран, 652 Snapdragon процессор и 64 Гб встроенной памяти, с задним облицовочный 16 Мпикс камерой и 8 Мп фронтальной камерой.
Asus Zenfone AR [ править ]
Asus Zenfone AR, анонсированный на выставке CES 2017 [22], стал вторым коммерческим смартфоном с технологией Tango. Он запускал Tango AR и Daydream VR на Snapdragon 821 с 6 или 8 ГБ оперативной памяти и 128 или 256 ГБ встроенной памяти в зависимости от конфигурации.
Соавторы и партнеры [ править ]
При создании Project Tango Google сотрудничал с разработчиками из девяти стран и нескольких организаций, включая Bosch , Bsquare , CompalComm , ETH Zurich , Flyby Media , Университет Джорджа Вашингтона , MMSolutions, Movidius , Университет Миннесоты, лабораторию MARS, [23] JPL Computer Vision Group, [24] OLogic , OmniVision , Фонд робототехники с открытым исходным кодом, Paracosm, Sunny Optical Technology, PMD Technologies , Mantis Vision, Prizmiq , Intermodalics и SagivTech.
Было объявлено о партнерстве [25] [26] с такими компаниями, как apelab, Autodesk , Aisle411 , Bosch , Defective Studios, Durovis (Dive), Infineon , JPL , Left Field Labs, Legacy Games , Limbic, moBack, NVYVE, OmniVision , Otherworld Interactive. , PMD Technologies , Sagivtech, SideKick, Speck Design, Stinkdigital и Inuitive.
См. Также [ править ]
- Компьютерное зрение
- Блок обработки зрения
- RGB
- Одновременная локализация и картография
Ссылки [ править ]
- ^ Объявление на сайте ATAP Google+ , 30 января 2015
- ^ «Телефоны будущего поймут, увидят мир» . 3 июня 2015 . Проверено 4 ноября 2015 года .
- ^ "Slamdance: внутри странной виртуальной реальности Google Project Tango" . 29 мая 2015.
- ^ Qualcomm Powers Next Generation Project Tango Development Platform , 2015-05-29
- ^ IDF 2015: Intel объединяется с Google для внедрения RealSense в Project Tango , 2015-08-18
- ^ «Google Project Tango закрывается, потому что ARCore уже здесь» . Грань . Проверено 16 декабря 2017 .
- ^ «10 смелых проектов Google X, нацеленных на технический прорыв» .
- ^ https://developers.google.com/project-tango/ Веб-сайт разработчика Google.
- ^ Инструмент дополненной реальности для обнаружения несоответствий дизайна: сравнительный тест с традиционными методами . Международная конференция по дополненной реальности, виртуальной реальности и компьютерной графике. 2019. DOI : 10.1007 / 978-3-030-25999-0_9 .
- ^ http://augmentedworldexpo.com/ Augmented World Expo 2015
- ^ AWE 2015, «Мобильное 3D-отслеживание и восприятие»
- ^ Google говорит, что это лучшие приложения для Project Tango , 2 ноября 2015 г.
- ^ Объявление о продукте на ATAP + странице , 5 июня 2014 , получено 4 ноября 2015
- ^ Спецификации на официальном сайте , данные получены 4 ноября 2015 г.
- ^ "Руководство пользователя Tango Tablet Development Kit | Tango | Разработчики Google" . Разработчики Google . Проверено 11 сентября 2016 .
- ^ «Запуск Lenovo ФАБ 2 Pro была важная веха для танго, маркировка ...» Источник 2017-07-15 .
- ^ Проект Google "Танго" отправился на Международную космическую станцию , 20 марта 2014 г.
- ^ "Google и Intel приносят RealSense на телефоны с комплектом разработчика Project Tango" .
- ^ "Телефон Intel RealSense с Project Tango доступен для предварительного заказа" .
- ^ «Комплект разработчика Intel RealSense для смартфонов теперь доступен для предварительного заказа за 399 долларов» .
- ^ Техническое описание продукта Intel Realsense ZR300
- ^ Анонс ASUS на CES 2017 -YouTube
- ^ http://mars.cs.umn.edu/ Лаборатория MARS Университета Миннесоты
- ^ https://www-robotics.jpl.nasa.gov/groups/ComputerVision JPL Группа компьютерного зрения
- ^ AWE 2015, «Мобильное 3D-отслеживание и восприятие»
- ^ Список партнеров на официальном сайте , получено 4 ноября 2015 г.
Внешние ссылки [ править ]
- Официальный веб-сайт
- Сайт разработчика Project Tango (API и документация) .
- Сообщество разработчиков Project Tango .
- Страница платформы разработки смартфонов Project Tango на Qualcomm .
- «Intel расширяет возможности разработчиков по мере того, как вычисления распространяются во всех сферах жизни людей» . Форум разработчиков Intel. 20 августа 2015.
- «Google и Intel внедряют RealSense на телефоны с помощью комплекта разработчика Project Tango» . Engadget. 18 августа 2015.
- «Google I / O 2015 - Project Tango - Мобильное трехмерное отслеживание и восприятие» . Джонни Ли, Google I / O, 2015. YouTube. 29 мая 2015.
- «Проектные концепции танго» . Джонни Ли, YouTube. 21 апреля 2015.
- «Разрушение планшета Project Tango» . я чиню это. 15 августа 2014 г.