BARU: Plugin GazeSense™ ROS kini tersedia

Peneliti dan pengembang robotika kini dapat mengandalkan bridge GazeSense™ untuk mengukur perhatian terhadap objek di ROS

GazeSense - perangkat lunak pelacakan mata untuk kamera penginderaan kedalaman Logo Robot Operating System

GazeSense adalah aplikasi yang menghadirkan pelacakan mata 3D dengan memanfaatkan sensor 3D konsumen. GazeSense memungkinkan pengguna mendefinisikan objek 3D virtual relatif terhadap sistem koordinat kamera dan dunia, lalu mengukur perhatian orang terhadap objek-objek tersebut.

Melalui plugin GazeSense ROS yang baru dirilis, bridge GazeSense menyalurkan data pelacakan mata dan perhatian secara real time, yang biasanya tersedia melalui API khusus, ke dalam Robot Operating System (ROS).

Apa itu ROS?

ROS adalah framework Robot Operating System yang fleksibel untuk menulis perangkat lunak robot. ROS merupakan kumpulan alat, pustaka, dan konvensi yang bertujuan menyederhanakan pembuatan perilaku robot yang kompleks dan andal di berbagai platform robotik.

Apa yang akan dilakukan GazeSense di ROS? GazeSense menyediakan mekanisme persepsi, yaitu sinyal real time tentang perhatian terhadap objek bagi para peneliti dan pengembang robotika. Dengan begitu, dapat diketahui apakah orang yang berinteraksi dengan robot sedang melihat salah satu objek yang telah didefinisikan atau tidak, atau sedang melihat robot itu sendiri. Label perhatian (‘apa yang sedang dilihat orang tersebut’) kemudian dipublikasikan sebagai topic ke dalam framework ROS. 

Penginderaan perhatian sangat berguna bagi mereka yang bekerja di bidang interaksi manusia-robot (HRI), karena penginderaan perhatian sangat penting untuk memahami niat keterlibatan dan membangun kedekatan.

Iterasi pertama plugin GazeSense ROS berfokus pada versi hard-coded yang memungkinkan pengguna untuk:

  • mendefinisikan objek dan memasukkannya ke GazeSense;
  • menangkap sinyal GazeSense tentang perhatian terhadap objek dan mempublikasikannya ke ROS.

Manusia melihat robot bermain piano‘Robot bermain piano’, foto oleh Franck V. di Unsplash

Jika Anda membutuhkan fitur lain, misalnya definisi objek yang lebih ‘plug-and-play’ untuk bridge GazeSense ROS, beri tahu kami melalui email ke products@eyeware.tech atau cukup ajukan permintaan Anda di Trello Board Ideas & Requests kami.

Di mana saya bisa mendapatkan plugin GazeSense ROS?

GazeSense tersedia di repositori GitHub agar mudah diakses dan dilihat.

Bawa saya ke plugin GazeSense ROS!

Mengapa kami membuat plugin GazeSense ROS yang tersedia bagi semua peneliti dan pengembang robotika yang menggunakan ROS?

Karena membuat perangkat lunak robot yang benar-benar andal dan serbaguna itu sulit, dan tidak ada yang bisa melakukannya sendirian. Karena itu, kami bergabung dengan platform pengembangan perangkat lunak robotika kolaboratif kelas dunia ini dan komunitas ROS yang dinamis, untuk membantu menghasilkan solusi yang andal dan saling membangun di atas karya satu sama lain.

Inti ROS dilisensikan di bawah lisensi BSD tiga klausul standar, lisensi terbuka yang sangat permisif dan memungkinkan penggunaan ulang dalam produk komersial maupun closed source.

Tahukah Anda? Melalui AWS RoboMaker, Amazon menggunakan ROS untuk menyediakan tempat bagi pengembang untuk mengembangkan dan menguji aplikasi robotika. Jika penasaran, Anda dapat menelusuri seluruh sejarah ROS yang berpengaruh di Wikipedia dengan menggulir ke bagian ‘milestones’.

Ingin plugin GazeSense tersedia untuk platform atau framework pengembangan lain? Apakah Anda bekerja dengan Unity, Matlab, atau platform khusus lainnya? Ajukan pilihan Anda di Ideas & Requests Board kami atau melalui email ke products@eyeware.tech, dan suara Anda akan didengar! Kami ingin mendukung upaya Anda dan menghadirkan  pelacakan mata 3D ke aplikasi dunia nyata dengan integrasi yang mudah.

Ajukan Permintaan Plugin Platform Baru!