7 principais casos de uso e aplicações do rastreamento ocular 3D

Os olhos são a janela da alma. Seja isso verdade ou não, o que não se pode negar é quanta informação os olhos revelam sobre cada um de nós. A hipótese do olho cooperativo sugere que o olho humano evoluiu para aumentar o tamanho e o brilho da esclera branca, para que pudéssemos nos comunicar melhor acompanhando o olhar uns dos outros. Ao combinar essa característica humana com novas tecnologias, como o rastreamento ocular 3D, podemos avançar ainda mais na forma como nos comunicamos e nas máquinas ao nosso redor.

Reconhecimento de voz, detecção de movimento e controle por toque são elementos que já vimos integrados a dispositivos do dia a dia. Uma parte essencial ainda falta: olhar nos olhos do usuário e entender sua atenção, seu interesse e seu engajamento, como as pessoas fazem naturalmente ao interagir umas com as outras. O rastreamento da atenção muda o jogo. 

A chegada do rastreamento ocular 3D, ou seja, o uso de câmeras de profundidade de consumo para rastrear o olhar, abre agora novas e empolgantes aplicações para a interação humano-máquina.

Estas são as principais aplicações do rastreamento ocular 3D em diferentes áreas:

1. Rastreamento da atenção no varejo

Em vez de pedir a um grupo focal pré-selecionado que use óculos em um estudo de pesquisa de mercado sobre a atenção às prateleiras, o que pode influenciar o comportamento dos participantes, o rastreamento ocular 3D permite acompanhar o olhar de quem passa com precisão e de forma não intrusiva. Ao monitorar a atenção do cliente, os varejistas podem analisar o desempenho dos produtos. O rastreamento da atenção oferece às empresas dados analíticos valiosos. O rastreamento ocular 3D pode gerar análises de atenção às prateleiras que identificam o número de visualizações e os pontos focais, sem necessidade de calibração. Empresas de pesquisa de mercado podem então usar esses insights para sugerir aos varejistas otimizações na abordagem de vendas e na experiência do cliente. A análise de rastreamento ocular vai impulsionar a vantagem competitiva da sua empresa.

Homem diante de uma prateleira de loja com mapa de calor de rastreamento ocular 3D no varejo

2. Rastreamento ocular para robótica

Ambos passam a ser capazes de detectar e prever as intenções das pessoas e sua atenção a objetos.

O rastreamento do olhar em 3D na robótica permite uma interação humano-robô mais natural e colaborativa. Hoje, os robôs não conseguem interpretar com precisão o nível de engajamento humano. No entanto, com seu “par de olhos”, que combina câmeras de profundidade com software de rastreamento ocular, eles podem gerar um vetor de olhar em 3D. Ambos passam a ser capazes de detectar, rastrear e prever a intenção e a atenção das pessoas em relação a objetos. Há casos de uso em robôs colaborativos, educacionais, de serviço ou assistivos, principalmente quando é necessária uma ampla gama de movimentos e de interação com objetos reais.

Assista a uma demonstração deste projeto de pesquisa com robô educacional do professor Joakim Gustaffson, do Royal Institute of Technology de Estocolmo. O sensor usado para o rastreamento ocular 3D é uma câmera Intel RealSense posicionada na frente de um robô Furhat.

3. Rastreamento ocular no setor automotivo

O rastreamento ocular no setor automotivo vai tornar as estradas mais seguras. A área de rastreamento limitada e a necessidade de uma configuração com vários sensores para rastrear o olhar em 3D restringem a aplicação das tecnologias atuais de rastreamento ocular nos carros. O reconhecimento do olhar vai resolver dois problemas principais da interação entre pessoas e carros.

Setor automotivo: monitoramento do motorista e rastreamento ocular

Segundo o European New Car Assessment Programme (NCAP), o monitoramento do motorista não só será considerado um padrão de “segurança primária” até 2020, como também “a avaliação vai girar em torno da confiabilidade e da precisão com que o estado do motorista é detectado”. Por isso, detectar a atenção do motorista para monitorá-lo e permitir transições coordenadas de controle em carros semiautônomos será indispensável. No futuro, o motorista será monitorado constantemente, e sua atenção será rastreada por câmeras de profundidade. Com os dados dessas câmeras, o software de rastreamento verifica a atenção do motorista.

Copiloto virtual automotivo

Carros são robôs. Eles já interagem com o motorista por meio de comandos de voz e gestos. No entanto, a detecção e o rastreamento da atenção ficaram para trás no setor automotivo. Um software de rastreamento ocular 3D para o setor automotivo pode permitir que o “assistente que enxerga” do carro perceba o olhar do motorista e dos passageiros em direção a partes do sistema de infoentretenimento, como o painel, o console central e os retrovisores,  além de permitir interações naturais com head-up displays de realidade aumentada e até fazer com que o copiloto virtual detecte o olhar em direção a objetos fora do carro.

Homem no carro usando software de rastreamento ocular 3D

4. Dispositivos de consumo

Celulares como o iPhone X ou o Xiaomi Mi8 e notebooks com câmeras de profundidade voltadas para o usuário podem ser atualizados para rodar software de rastreamento ocular 3D sem precisar de um dispositivo de rastreamento ocular adicional. A câmera de profundidade passa então a detectar a atenção dada a partes da tela, o que pode permitir que o usuário navegue parcialmente pelo dispositivo com os olhos. A tecnologia de rastreamento ocular em celulares vai melhorar muito a experiência dos usuários com uma nova forma de entrada. Em notebooks gamer, o rastreamento do olhar em 3D pode intensificar a experiência de jogo ao interagir com avatares ou ao esmaecer menus de informação fora de foco para deixar a tela mais limpa.

Câmera de profundidade frontal em um iPhone

5. Soluções de tecnologia assistiva

Soluções de software personalizadas com câmeras de profundidade de consumo podem ajudar pessoas com deficiência a controlar um computador, com as funções do mouse mapeadas para movimentos da cabeça, gestos faciais e rastreamento do olhar. Essa assistência ampliada permitiria ao usuário se comunicar melhor e com mais facilidade. Os usuários também podem guiar um braço robótico assistivo até o objeto de interesse, reduzindo ao mínimo a necessidade do cansativo controle por joystick. No vídeo abaixo, Henny Admoni, professora assistente do Robotics Institute da Carnegie Mellon University, apresenta sua pesquisa sobre como o reconhecimento do olhar pode melhorar a coordenação entre humanos e robôs.

6. Rastreamento ocular na publicidade

Os anunciantes podem analisar melhor a atenção e o foco do consumidor em anúncios externos usando análises de rastreamento ocular 3D que não exigem nenhum processo de calibração.

A análise de público pode informar o número de visualizações do anúncio, a recepção emocional, o horário de maior atenção e outras estatísticas em tempo real úteis para o anunciante.

7. Pesquisa comportamental

Pesquisadores usam o rastreamento ocular para estudar o comportamento em condições como TDAH e autismo, por exemplo, como as pessoas consomem informação visualmente. O GazeSense é uma ferramenta de pesquisa, não um dispositivo de diagnóstico.

No entanto, especialmente com crianças, muitas vezes é difícil mantê-las dentro da área de rastreamento dos rastreadores oculares atuais, e às vezes é até impossível seguir um procedimento de calibração rigoroso. O rastreamento ocular 3D pode aliviar esses problemas, com uma área de rastreamento mais ampla, em diversas posições extremas da cabeça e com a opção de rastreamento sem calibração. Entre as vantagens do software de rastreamento ocular da Eyeware estão, por exemplo, dispensar óculos e usar câmeras de profundidade de consumo.

Teremos prazer em ajudar você a experimentar a codificação do olhar em 3D em tempo real com nosso software. Entre em contato com a equipe da Eyeware por mensagem direta.