NOVINKA: plugin GazeSense™ pro ROS je k dispozici
Výzkumníci a vývojáři v robotice teď mohou díky mostu GazeSense™ měřit pozornost věnovanou objektům v ROS
GazeSense je aplikace, která zajišťuje 3D sledování očí pomocí spotřebitelských 3D senzorů. GazeSense umožňuje definovat virtuální 3D objekty vůči souřadnicovému systému kamery a světa a měřit pozornost, kterou jim lidé věnují.
Díky nově vydanému pluginu GazeSense ROS zpřístupňuje most GazeSense data o sledování očí a pozornosti v reálném čase, běžně dostupná přes vlastní API, v prostředí Robot Operating System (ROS).
Co je ROS?
ROS je flexibilní framework Robot Operating System pro psaní softwaru pro roboty. Jde o soubor nástrojů, knihoven a konvencí, jejichž cílem je zjednodušit vytváření složitého a robustního chování robotů na nejrůznějších robotických platformách.
Co bude GazeSense v ROS dělat? Nabízí mechanismus vnímání: GazeSense poskytuje výzkumníkům a vývojářům v robotice signály o pozornosti věnované objektům v reálném čase. Lze tak zjistit, zda se člověk při interakci s robotem dívá na některý z definovaných objektů, nebo ne, případně zda se dívá na samotného robota. Štítek pozornosti („na co se člověk dívá“) se pak publikuje jako topic do frameworku ROS.
Snímání pozornosti se hodí zejména lidem, kteří pracují v oblasti interakce člověka s robotem (HRI), protože je klíčové pro pochopení zapojení a záměru a pro budování vztahu.
První verze pluginu GazeSense ROS je pevně naprogramovaná a umožňuje uživateli:
- definovat objekty a předat je do GazeSense;
- zachytit signály GazeSense o pozornosti věnované objektům a publikovat je do ROS.
„Robot hrající na klavír“, foto: Franck V., Unsplash
Pokud hledáte další funkce, například jednodušší definici objektů pro most GazeSense ROS v duchu „plug-and-play“, dejte nám vědět e-mailem na products@eyeware.tech nebo zadejte svůj požadavek na naši nástěnku Trello pro nápady a požadavky.
Kde plugin GazeSense ROS získám?
Plugin GazeSense je pro snadný přístup a prohlížení umístěn v repozitáři na GitHubu.
Chci přejít na plugin GazeSense ROS!
Proč jsme vytvořili plugin GazeSense ROS dostupný všem výzkumníkům a vývojářům v robotice, kteří používají ROS?
Protože vytvořit skutečně robustní a univerzální software pro roboty je těžké a nikdo nemůže doufat, že to zvládne sám. Proto se připojujeme ke špičkové platformě pro kolaborativní vývoj robotického softwaru a k živé komunitě robotiků kolem ROS, abychom pomohli vytvářet robustní řešení a stavět na práci ostatních.
Jádro ROS je licencováno pod standardní tříbodovou licencí BSD, velmi benevolentní otevřenou licencí, která umožňuje opětovné použití v komerčních produktech i produktech s uzavřeným zdrojovým kódem.
Věděli jste? Amazon prostřednictvím své služby AWS RoboMaker využívá ROS a nabízí vývojářům prostor pro vývoj a testování robotických aplikací. Pokud vás to zajímá, můžete si celou významnou historii ROS projít na Wikipedii v části „milestones“.
Chtěli byste plugin GazeSense pro jinou vývojovou platformu nebo framework? Pracujete s Unity, Matlabem nebo jinými specializovanými platformami? Zadejte svou volbu na naši nástěnku nápadů a požadavků nebo nám napište na products@eyeware.tech a váš hlas bude slyšet! Chceme podpořit vaši práci a přinést 3D sledování očí do reálných aplikací se snadnou integrací.