7 главных сценариев применения 3D-отслеживания взгляда
Глаза называют зеркалом души. Так это или нет, бесспорно одно: глаза рассказывают нам друг о друге очень многое. Согласно гипотезе кооперативного глаза, белая склера человеческого глаза в ходе эволюции стала больше и светлее, чтобы нам было проще общаться, следя за взглядом друг друга. Соединив эту человеческую особенность с новыми технологиями, такими как 3D-отслеживание взгляда, мы можем продвинуть вперёд и то, как мы общаемся, и окружающие нас машины.
Распознавание речи, датчики движения и сенсорное управление давно встроены в повседневные устройства. Не хватает одного важного элемента: смотреть пользователю в глаза и понимать его внимание, интерес и вовлечённость, как люди естественно делают при общении друг с другом. Отслеживание внимания меняет правила игры.
Появление 3D-отслеживания взгляда, то есть отслеживания взгляда с помощью потребительских камер глубины, открывает новые интересные применения для взаимодействия человека и машины.
Вот главные применения 3D-отслеживания взгляда в разных сферах:
1. Отслеживание внимания в ритейле
Вместо того чтобы просить заранее отобранную фокус-группу надеть очки для маркетингового исследования внимания к полкам (что может повлиять на их поведение), 3D-отслеживание взгляда позволяет точно и ненавязчиво отслеживать взгляд проходящих мимо покупателей. Наблюдая за вниманием покупателей, ритейлеры могут анализировать эффективность товаров. Отслеживание внимания даёт компаниям ценную аналитику. 3D-отслеживание взгляда обеспечивает аналитику внимания к полкам: число просмотров и точки фокусировки без всякой калибровки. Компании, проводящие маркетинговые исследования, могут затем использовать полученные данные и предлагать ритейлерам улучшения в подходе к продажам и клиентском опыте. Аналитика отслеживания взгляда усилит конкурентное преимущество вашей компании.
2. Отслеживание взгляда в робототехнике
Это позволяет распознавать и предсказывать намерения людей и их внимание к объектам.
3D-отслеживание взгляда в робототехнике делает взаимодействие человека и робота более естественным и совместным. Сейчас роботы не умеют точно считывать уровень вовлечённости человека. Но если дать им «пару глаз», то есть камеры глубины вместе с ПО для отслеживания взгляда, они смогут строить 3D-вектор взгляда. Это позволяет распознавать, отслеживать и предсказывать намерения людей и их внимание к объектам. Сценарии применения есть у коллаборативных, образовательных, сервисных и вспомогательных роботов, особенно там, где нужен широкий диапазон движений и взаимодействие с реальными объектами.
Посмотрите демонстрацию исследовательского проекта образовательного робота профессора Joakim Gustaffson из Королевского технологического института в Стокгольме. Для 3D-отслеживания взгляда используется камера Intel RealSense, установленная перед роботом Furhat.
3. Отслеживание взгляда в автомобилях
Отслеживание взгляда в автомобильной отрасли сделает дороги безопаснее. Ограниченная зона отслеживания и необходимость в нескольких датчиках для 3D-отслеживания взгляда сужают возможности применения нынешних технологий в автомобилях. Распознавание взгляда решит две главные задачи взаимодействия человека и автомобиля.
Автомобили: мониторинг водителя и отслеживание взгляда
Согласно Европейской программе оценки новых автомобилей (NCAP), к 2020 году мониторинг водителя не только будет считаться стандартом «первичной безопасности», но и, как там отмечают, «оценка будет строиться вокруг того, насколько надёжно и точно определяется состояние водителя». Поэтому распознавание внимания водителя для мониторинга и согласованной передачи управления в полуавтономных автомобилях станет обязательным. В будущем водитель будет находиться под постоянным мониторингом, а его внимание будут отслеживать камеры глубины. По данным камер ПО для отслеживания проверяет внимание водителя.
Виртуальный второй пилот в автомобиле
Автомобили сами по себе роботы. Они уже взаимодействуют с водителем через голосовые команды и жесты. Однако распознавание и отслеживание внимания в автомобильной отрасли отстаёт. ПО для 3D-отслеживания взгляда в автомобилях позволит «видящему ассистенту» распознавать, куда смотрят водитель и пассажиры: на элементы информационно-развлекательной системы, такие как приборная панель, центральная консоль и зеркала, а также обеспечит естественное взаимодействие с проекционными дисплеями дополненной реальности и даже позволит виртуальному второму пилоту определять взгляд на объекты за пределами автомобиля.
4. Потребительские устройства
Мобильные телефоны, такие как iPhone X или Xiaomi Mi8, и ноутбуки с фронтальными камерами глубины можно научить запускать ПО для 3D-отслеживания взгляда без дополнительного устройства для отслеживания взгляда. Камера глубины тогда сможет определять, на какие части экрана направлено внимание, и, возможно, позволит частично управлять устройством глазами. Технология отслеживания взгляда в телефонах даст пользователям совершенно новый способ ввода. На игровых ноутбуках 3D-отслеживание взгляда может усилить игровой опыт при взаимодействии с аватарами или приглушать информационные меню вне фокуса, чтобы разгрузить экран.
5. Вспомогательные технологии
Специализированные программные решения на базе потребительских камер глубины помогают людям с ограниченными возможностями управлять компьютером: функции мыши привязываются к движениям головы, мимике и отслеживанию взгляда. Такая поддержка позволяет пользователю общаться лучше и с меньшими усилиями. Пользователи также могут направлять роботизированную вспомогательную руку к нужному объекту, сводя к минимуму утомительное управление джойстиком. В видео ниже Henny Admoni, доцент Института робототехники Университета Карнеги-Меллона, рассказывает о своём исследовании того, как распознавание взгляда может улучшить координацию человека и робота.
6. Отслеживание взгляда в рекламе
Рекламодатели могут точнее анализировать внимание и фокус потребителей на наружной рекламе с помощью аналитики 3D-отслеживания взгляда, которая не требует калибровки.
Аналитика аудитории показывает число просмотров рекламы, эмоциональную реакцию, время суток с наибольшим вниманием и другую полезную для рекламодателя статистику в реальном времени.
7. Поведенческие исследования
Исследователи используют отслеживание взгляда, чтобы изучать поведение при таких состояниях, как СДВГ и аутизм, например то, как люди визуально воспринимают информацию. GazeSense является исследовательским инструментом, а не диагностическим устройством.
Однако удерживать в зоне отслеживания нынешних айтрекеров особенно детей бывает непросто, а следовать строгой процедуре калибровки порой просто невозможно. 3D-отслеживание взгляда снимает эти проблемы благодаря более широкой зоне отслеживания, работе при самых разных положениях головы и возможности отслеживания без калибровки. Преимущества ПО для отслеживания взгляда от Eyeware, например, в том, что не нужны очки и используются потребительские камеры глубины.