아이 트래킹으로 조종석 시뮬레이터를 개선하는 방법: 운전 및 비행 교육 성과 앞당기기

최근 연구에 따르면 아이 트래킹 기술은 인지 부하(받아들이는 정보의 양)를 측정해 시뮬레이터 교육을 개선할 수 있습니다. 개인화 학습과 적응형 학습에도 활용할 수 있어 학습 속도를 높이고 직원이 더 일찍 성과를 내도록 돕습니다. 

이 기술이 교육 방식을 한 단계 끌어올리는 여러 산업 가운데 특히 항공과 자동차 분야가 큰 혜택을 봅니다. 이 분야에서는 시선과 사람의 관찰이 매우 중요하며, 비행 또는 운전 시뮬레이터 프로그램 중에 이를 모니터링하면 교관은 향후 행동을 예측하고 직원의 이해도를 평가할 수 있습니다. 나아가 학습과 교육 과정을 어떻게 개선할 수 있는지 파악해 교육 시간과 비용을 줄일 수 있습니다.

또한 휴먼 에러를 줄여 훨씬 안전한 환경을 만드는 데에도 큰 영향을 미칠 수 있습니다. 교육 세션 중 눈의 움직임을 반복적으로 연구하지 않았다면 쉽게 찾아내지 못했을 실수를 파악할 수 있기 때문입니다.

비행 및 운전 시뮬레이터 교육의 아이 트래킹

그렇다면 3D 아이 트래킹 기술은 학습 과정에 어떤 영향을 주고 어떻게 개선할 수 있을까요? 그리고 이를 비행 승무원(특히 조종사)과 운전자 교육에 어떻게 적용할 수 있을까요? 이 글에서는 먼저 학습 과정에 3D 아이 트래킹을 활용할 때 일반적으로 얻을 수 있는 이점을 설명하고, 이를 비행 및 운전 교육에 적용해 이 질문에 답합니다.

3D 아이 트래킹은 교육을 어떻게 지원하고 교육생의 성과를 높일까?

3D 아이 트래킹이 교육 프로그램을 무엇으로, 어떻게 지원하는지 답하기 전에 3D 아이 트래킹 기술의 작동 원리를 알아야 합니다. 

일반적인 아이 트래킹과 달리 3D 아이 트래킹은 최대 1.3m(4.3ft) 떨어진 곳에서 원격으로 시각적 주의를 추적합니다. 기존 장비가 더 이상 필요 없고, 교육생은 교육이나 시뮬레이션 중에 헤드기어를 착용하는 부담을 지지 않습니다.

  • 안경 불필요 
  • VR 헤드셋 불필요 
  • 캘리브레이션 불필요 
조종석 시뮬레이터의 아이 트래킹

방법은 아주 간단합니다. 조종석 시뮬레이터에 3D 깊이 감지 카메라를 설치하면 여러 대상을 추적하고, 비행/운전 데크의 관심 객체(명령/조종 영역, 특정 장치, 계기판 등)에 레이블을 지정하고, 그 객체에 대한 주의를 실시간으로 추적할 수 있습니다. 

이는 분석 지점을 매핑하도록 만들어진 3D 아이 트래킹 소프트웨어 GazeSense로 가능합니다. 이 소프트웨어는 대상이 어디를, 무엇을 보고 있는지 정확하게 해석할 수 있습니다(아래 영상에서 확인할 수 있습니다).

3D 아이 트래킹 기술은 착용할 필요가 없는 비침습적 장치로, 실제 환경과 통합해 교육 프로그램 개선에 도움이 되는 새로운 데이터를 수집할 수 있습니다. 

시뮬레이션 프로그램의 “현상 유지”에 도전하고 새로운 관점을 제시할 준비가 된 차세대 기술입니다. 이제 초점은 교육 내용 자체보다 대상이 되는 교육생, 그리고 그의 민첩성, 경계 태세, 몰입도, 수행 능력에 맞춰집니다.

그 목적은 먼저 교육생의 시선과 관심 지점에 관한 데이터를 수집해 미래 또는 현재의 직원이 절차를 따르는지 확인하는 것보다 더 큽니다. 아이 트래킹은 학습 습관을 더 잘 이해하고, 교육 시간을 줄이며, 교육생이 더 빠르게 실력을 키우도록 돕습니다.

실시간 교육생 모니터링

3D 아이 트래킹으로 가장 먼저 할 수 있는 일은 시선을 실시간으로 모니터링하거나 세션 후에 검토하는 것입니다. 실시간 시각 점검과 주의 지속 시간 모니터링은 효율을 높이는 도구가 됩니다. 나아가 비상 상황의 우선순위 판단을 즉석에서 바로잡아 초기부터 올바른 습관을 들이도록 할 수 있습니다. 

교육 세션 중 교육생과 하나 되기 

교관에게 교육생의 시선을 볼 수 있다는 것은 매우 중요합니다. 

3D 아이 트래킹을 사용하면 교관이 교육생 뒤에 있더라도 모든 눈의 움직임을 볼 수 있습니다. 덕분에 교육 과정을 더 잘 지원하고, 교육의 어떤 부분을 반복해야 하는지, 어떤 즉각적인 교정이 필요한지, 조종 패널에 대한 주의에서 무엇을 개선할 수 있는지 더 정확하고 빠르게 파악할 수 있습니다.

교육 중 “아무런 구속 없이”

3D 아이 트래킹의 주요 장점 중 하나는 안경이나 어떤 형태의 헤드기어도 필요 없다는 것입니다. 추가 헤드기어는 교육생의 경험과 수행에 영향을 줄 수 있기 때문에 비행 및 운전 교육에서는 특히 중요합니다. 또한 캘리브레이션이 필요 없고, 눈에 띄지 않는 저렴한 3D 카메라로 저조도 환경에서도 작동합니다.

인지 부하 인사이트

교육 프로그램의 일차적인 책임은 학습 과정을 지원하는 것입니다. 하지만 학습 과정은 전적으로 인간의 기억 체계에 달려 있습니다. 

중요한 것은 교육생의 어깨, 더 정확히 말하면 두뇌에 지우는 정보와 절차의 부담을 어떻게 최적화하고, 필요할 때 최소화할 수 있는지 이해하는 것입니다.

비행 및 운전자 교육의 아이 트래킹

또한 교육 시간 동안 시선을 추적하면 교육생의 주의 지속 시간과 우선순위 판단에 관한 핵심 인사이트를 주는 눈 움직임 데이터를 얻을 수 있습니다. 예를 들어 조종사 및 운전 교육 시뮬레이터에서는 주요 경보 5개가 한꺼번에 울리는 것과 같은 인지 과부하에 조종사 교육생이 어떻게 반응하고 주의의 우선순위를 정하는지 아는 것이 매우 중요합니다.

더 좋고 더 안전한 업무 환경

3D 아이 트래킹으로 수집한 빅데이터 분석은 어떤 규칙과 절차를 개선하거나 바꿔야 하는지, 어떤 모범 사례를 더 장려해야 하는지에 대한 중요한 인사이트도 제공합니다.  

예를 들어 항공사라면 아이 트래킹을 활용해 악천후 상황에서 오류가 가장 많이 발생하는 지점을 파악할 수 있습니다. 대상이 검토가 필요한 잘못된 곳을 보거나 잘못된 행동을 하는지, 혹은 조종석 계기를 제대로 모니터링하지 않는지 확인할 수 있습니다. 

그 결과 비행 교관은 이런 상황에서 조종사가 어떻게 행동해야 하는지에 관한 데이터를 반영해 교육 전략을 더욱 개선할 수 있습니다.

비행 시뮬레이터의 아이 트래킹

운전자 및 조종사 교육에 3D 아이 트래킹 도입하기 

3D 아이 트래킹을 활용한 교육의 이러한 장점은 주의와 안전이 매우 중요한 직무에 유용합니다. 

그래서 위험도와 책임이 높은 두 직무인 조종사와 운전자 교육에서 판도를 바꿀 수 있습니다. 업무에서 완벽한 수행을 책임질 뿐 아니라 다른 사람의 생명까지 책임지는 직무입니다. 어떤 실수도 용납되지 않는 분야입니다. 

바로 이 지점에서 3D 아이 트래킹이 사람의 수행 능력을 높여 줍니다.

3D 아이 트래킹이 운전자 교육을 개선하는 방법

교육생이 차량을 운전하면서 차량 제어, 핵심 시각 요소를 분석한 상황 판단, 내비게이션 등 여러 작업을 동시에 해야 하는 상황에 3D 아이 트래킹을 도입하면 큰 이점이 있습니다.

운전면허 교육의 아이 트래킹

운전자 교육의 아이 트래킹따라서 운전자의 경우 주로 주의 산만과 졸음에 관련된 시선 측정  분석을 통해 다음이 가능해집니다.

  • 더 나은 운전 안전 절차를 개발하는 데 기여합니다.
  • 교육생과 진행하는 향후 교육 디브리핑을 개선합니다.

3D 아이 트래킹이 조종사 교육에 미치는 영향

시선 추적을 비행기 조종석 같은 실제 상황과 결합하면 교육생이 주변 정보를 어떻게 받아들이는지 실시간으로 평가하고, 실제 상황에서의 인간 행동과 경계 태세 및 수행 지표에 관한 데이터, 즉 정규 조종사 교육에서는 얻을 수 없는 데이터를 수집할 수 있습니다.

비행 시뮬레이터의 아이 트래킹

이 데이터를 실시간으로 확인하고 더 깊이 분석하면 조종사 교관은 실행 가능한 인사이트를 얻어 다음을 할 수 있습니다.

  • 실제 맥락에서 조종사의 자연스러운 행동과 상황 인식(SA)을 더 잘 이해합니다 – 교육생이 기술적 문제 해결, 악천후 비행, 비상 상황 대처에 자연스럽게 어떻게 반응하는지 알 수 있습니다.
  • 조종사의 기술과 역량에 대해 증거 기반의 개인화된 평가나 교정을 제공합니다.
  • 교육 절차와 방법을 개선합니다 – 교관으로서 정보를 더 잘 전달하고, 더 효과적으로, 꼭 필요한 정보만 제공할 수 있습니다.

정리: 교육 환경에서 3D 아이 트래킹 활용하기

결국 3D 아이 트래킹은 교관과 조종사 승무원, 운전자, 교육생 사이의 비언어적 소통을 개선합니다. 

교육생은 말 한마디 없이 시선만으로 자신의 필요에 맞게 교육을 어떻게 더 잘 진행할 수 있는지, (조종석 시뮬레이션의 경우) 핵심 관심 영역이 어디인지, 가장 중요한 정보를 가장 적절한 시점에 어떻게 제시할 수 있는지에 대한 귀중한 피드백을 줍니다.

3D 아이 트래킹의 장점을 정리하면 다음과 같습니다.

    • 교육 초기 단계부터 개선된 교육 자료. 이전 교육 세션의 모든 근거를 바탕으로 정보를 보여 주는 방식을 개선하고, 어떤 부분을 강조하거나 반복해야 하는지 알 수 있습니다.
    • 3D 아이 트래킹 교육 경험을 바탕으로 한 전반적인 교육 환경 개선
    • 휴먼 에러의 조기 예측과 예방
    • 오류를 더 일찍 발견하는 더 안전한 비행 및 운전 훈련

3D 아이 트래킹은 교육 시간과 비용을 줄이고 직원의 효율과 운송 안전 지표를 높이는, 교육 환경의 업그레이드라고 해도 과언이 아닙니다.

👉 문의해 주시면 3D 아이 트래킹으로 시뮬레이터 교육 프로그램을 개선할 수 있도록 도와드립니다.