Du kan kanske snart handla handsfree med eBays nya programvara med öppen källkod, HeadGaze

Du kan kanske snart handla handsfree med eBays nya programvara med öppen källkod, HeadGaze

eBays nya HeadGaze öppen källkodsteknik fungerar med Apples TrueDepth-kamera för att dra av det omöjliga. Med tekniken kan du nu handla eller navigera i appar med huvudets rörelse. Programvaran utvecklades nyligen som en del av en praktikplats på e-handelsplatsen.

HeadGaze, som redan finns att ladda ner på GitHub.com, använder Apples ARKit-ramverk för att skapa en virtuell penna som följer dina huvudrörelser, oavsett om de är uppåt, nedåt eller sida vid sida. Därifrån tar det huvudets 3D-information från AR-kit och tillämpar 3D-geometrisk mappning för att hitta platsen för “markören” på skärmen. På samma sätt som en mus navigerar markören på ett skrivbord, låter designen dig peka på valfri plats på skärmen med huvudet och aktivera angivna “knappar”.

Här är HeadGaze i aktion:

Muratcan Cicek, eBay Intern och Ph.D. Kandidat vid University of California, Santa Cruz förklarar några av de möjliga användningarna av HeadGaze:

Trött på att försöka bläddra igenom ett recept på din telefonskärm med oljiga fingrar medan du lagar mat? För rörigt att följa bruksanvisningen på din mobiltelefon medan du prickar med bilmotorn under huven? För kallt för att ta bort dina handskar för att använda din telefon?

Låter fantastiskt, nej?

Det blir intressant att se vart HeadGaze går härifrån. Med tanke på att det är öppen källkod kan det implementeras var som helst. Som ett minimum skulle det vara trevligt att se tekniken komma till eBay shopping-appen. Och med företag som vill lägga till mer tillgänglighet till sina produkter och tjänster kan denna typ av teknik vara bra för dem som har begränsad användning av händer och armar.

Just nu är Apples TrueDepth-kamera endast tillgänglig för iPhone X. Det borde förändras imorgon den 12 september när företaget kommer att avslöja tre nya iPhones och två nya iPad Pro-surfplattor. Alla fem enheter förväntas inkludera kameran och stödja Face ID.