7 najważniejszych zastosowań śledzenia wzroku 3D
Oczy są zwierciadłem duszy. Niezależnie od tego, czy to prawda, nie da się zaprzeczyć, jak wiele informacji o sobie nawzajem możemy wyczytać z oczu. Hipoteza oka kooperacyjnego zakłada, że ludzkie oko wyewoluowało w kierunku większej i jaśniejszej białej twardówki, abyśmy mogli lepiej się porozumiewać, podążając za spojrzeniem innych. Łącząc tę ludzką cechę z nowymi technologiami, takimi jak śledzenie wzroku 3D, możemy dalej rozwijać sposób, w jaki komunikujemy się ze sobą i z otaczającymi nas maszynami.
Rozpoznawanie mowy, wykrywanie ruchu i sterowanie dotykowe to elementy, które już na stałe weszły do codziennych urządzeń. Brakuje jednak jednego kluczowego elementu: patrzenia użytkownikowi w oczy i rozumienia jego uwagi, zainteresowania i zaangażowania, tak jak naturalnie robią to ludzie w kontaktach ze sobą. Śledzenie uwagi to prawdziwy przełom.
Wprowadzenie śledzenia wzroku 3D, czyli wykorzystania konsumenckich kamer głębi do śledzenia spojrzenia, otwiera nowe, fascynujące zastosowania w interakcji człowieka z maszyną.
Oto najważniejsze zastosowania śledzenia wzroku 3D w różnych dziedzinach:
1. Śledzenie uwagi w handlu
Zamiast prosić wcześniej dobraną grupę fokusową o założenie okularów na potrzeby badania rynku dotyczącego uwagi poświęcanej półkom, co może wpływać na zachowanie uczestników, śledzenie wzroku 3D pozwala dokładnie i nieinwazyjnie śledzić spojrzenia przechodzących klientów. Monitorując uwagę klientów, sprzedawcy mogą analizować skuteczność produktów. Śledzenie uwagi dostarcza firmom cennych danych analitycznych. Śledzenie wzroku 3D umożliwia analizę uwagi przy półce, która określa liczbę spojrzeń i punkty skupienia bez potrzeby kalibracji. Firmy badające rynek mogą następnie wykorzystać zdobytą wiedzę, by proponować sprzedawcom usprawnienia w podejściu do sprzedaży i doświadczeniu klienta. Analityka oparta na śledzeniu wzroku wzmocni przewagę konkurencyjną Twojej firmy.
2. Śledzenie wzroku w robotyce
Oba elementy pozwalają wykrywać i przewidywać intencje ludzi oraz ich uwagę skierowaną na obiekty.
Śledzenie spojrzenia 3D w robotyce umożliwia bardziej naturalną i opartą na współpracy interakcję człowieka z robotem. Obecnie roboty nie potrafią precyzyjnie odczytać poziomu zaangażowania człowieka. Jednak dzięki „parze oczu”, czyli kamerom głębi połączonym z oprogramowaniem do śledzenia wzroku, mogą wyznaczyć wektor spojrzenia w 3D. Oba elementy pozwalają wykrywać, śledzić i przewidywać intencje ludzi oraz ich uwagę skierowaną na obiekty. Zastosowania obejmują roboty współpracujące, edukacyjne, usługowe i asystujące, zwłaszcza tam, gdzie potrzebny jest szeroki zakres ruchu i interakcja z rzeczywistymi obiektami.
Obejrzyj demo tego projektu badawczego z robotem edukacyjnym prowadzonego przez profesora Joakima Gustaffsona z Królewskiego Instytutu Technologicznego w Sztokholmie. Czujnikiem do śledzenia wzroku 3D jest kamera Intel RealSense umieszczona przed robotem Furhat.
3. Śledzenie wzroku w motoryzacji
Śledzenie wzroku w branży motoryzacyjnej zwiększy bezpieczeństwo na drogach. Ograniczony obszar śledzenia i konieczność stosowania wielu czujników do śledzenia spojrzenia w 3D ograniczają przydatność obecnych technologii śledzenia wzroku w samochodach. Rozpoznawanie spojrzenia rozwiąże dwa główne problemy interakcji człowieka z samochodem.
Motoryzacja: monitorowanie kierowcy i śledzenie wzroku
Według Europejskiego Programu Oceny Nowych Samochodów (Euro NCAP) monitorowanie kierowcy nie tylko zostanie do 2020 roku uznane za standard „bezpieczeństwa czynnego”, ale też „ocena będzie dotyczyć tego, jak niezawodnie i dokładnie wykrywany jest stan kierowcy”. Wykrywanie uwagi kierowcy w celu jego monitorowania i umożliwienia skoordynowanego przekazywania kontroli w samochodach półautonomicznych stanie się więc koniecznością. W przyszłości kierowca będzie stale monitorowany, a jego uwaga śledzona za pomocą kamer głębi. Na podstawie danych z kamer oprogramowanie sprawdza uwagę kierowcy.
Wirtualny drugi pilot w samochodzie
Samochody to roboty. Już dziś reagują na polecenia głosowe i gesty kierowcy. Wykrywanie i śledzenie uwagi w branży motoryzacyjnej pozostaje jednak w tyle. Oprogramowanie do śledzenia wzroku 3D dla motoryzacji może sprawić, że „widzący asystent samochodowy” będzie wykrywał spojrzenia kierowcy i pasażerów skierowane na elementy systemu informacyjno-rozrywkowego, takie jak deska rozdzielcza, konsola środkowa i lusterka, ale też umożliwi naturalną interakcję z wyświetlaczami przeziernymi (HUD) z rozszerzoną rzeczywistością, a nawet pozwoli wirtualnemu drugiemu pilotowi wykrywać spojrzenia skierowane na obiekty na zewnątrz samochodu.
4. Urządzenia konsumenckie
Telefony komórkowe, takie jak iPhone X czy Xiaomi Mi8, oraz laptopy z kamerami głębi skierowanymi na użytkownika mogą zyskać oprogramowanie do śledzenia wzroku 3D bez dodatkowego eye trackera. Kamera głębi może wtedy wykrywać, na które części ekranu użytkownik kieruje uwagę, co potencjalnie pozwala częściowo sterować urządzeniem wzrokiem. Śledzenie wzroku w telefonach komórkowych znacznie usprawni korzystanie z nich dzięki nowemu sposobowi wprowadzania poleceń. W laptopach do gier śledzenie spojrzenia 3D może wzbogacić rozgrywkę podczas interakcji z awatarami lub przygaszać menu informacyjne, na których gracz się nie skupia, aby uporządkować ekran.
5. Rozwiązania z zakresu technologii wspomagających
Dostosowane oprogramowanie wykorzystujące konsumenckie kamery głębi może pomagać osobom z niepełnosprawnościami w obsłudze komputera: funkcje myszy są przypisane do ruchów głowy, mimiki twarzy i śledzenia spojrzenia. Takie wsparcie pozwala użytkownikowi łatwiej i lepiej się komunikować. Użytkownicy mogą też kierować robotycznym ramieniem asystującym w stronę interesującego ich obiektu, ograniczając do minimum żmudne sterowanie joystickiem. W poniższym filmie Henny Admoni, adiunkt w Robotics Institute na Carnegie Mellon University, przedstawia swoje badania nad tym, jak rozpoznawanie spojrzenia może usprawnić koordynację człowieka z robotem.
6. Śledzenie wzroku w reklamie
Reklamodawcy mogą lepiej analizować uwagę i skupienie odbiorców na reklamach zewnętrznych dzięki analityce opartej na śledzeniu wzroku 3D, która nie wymaga żadnej kalibracji.
Analityka odbiorców może dostarczać informacji o liczbie wyświetleń reklamy, reakcjach emocjonalnych, porze dnia, w której uwaga jest największa, oraz innych danych w czasie rzeczywistym, przydatnych dla reklamodawcy.
7. Badania behawioralne
Badacze wykorzystują śledzenie wzroku do badania zachowania w takich stanach jak ADHD czy autyzm, na przykład tego, w jaki sposób ludzie przyswajają informacje wzrokowe. GazeSense to narzędzie badawcze, a nie urządzenie diagnostyczne.
Jednak zwłaszcza w przypadku dzieci często trudno jest utrzymać je w zasięgu działania obecnych eye trackerów, a czasem przeprowadzenie ścisłej procedury kalibracji jest wręcz niemożliwe. Śledzenie wzroku 3D może rozwiązać te problemy dzięki szerszemu zasięgowi śledzenia, działaniu przy różnych skrajnych pozycjach głowy i możliwości śledzenia bez kalibracji. Zaletami oprogramowania do śledzenia wzroku firmy Eyeware są na przykład brak okularów i wykorzystanie konsumenckich kamer głębi.