De nieuwe technologie van eBay bestuurt je iPhone met hoofdbewegingen

De TrueDepth-camera op de iPhone X maakt FaceID en Animoji mogelijk. Maar een briljante stagiair bij eBay maakte vroeger technologie om head-tracking-software te maken die kan worden gebruikt om de iPhone te besturen.

HeadGaze is zojuist open source gemaakt, dus elke ontwikkelaar kan het in zijn eigen software inbouwen.

"Ons team heeft een model gebouwd dat een virtuele stylus maakt die de beweging van je hoofd volgt (omhoog, omlaag, van links naar rechts), waarbij de 3D-informatie van het hoofd van ARKit en het toepassen van 3D-geometriemapping om de locatie van de 'cursor' op het scherm te krijgen", schreef Muratcan Cicek, eBay-stagiair en PhD-kandidaat aan de Universiteit van Californië, Santa cruz, in een officiële blogpost.

HeadGaze bevat een gebruikersinterface waarmee een gebruiker met motorische beperkingen door het scherm kan scrollen of tussen pagina's kan bewegen. Als u de cursor op een knop plaatst, wordt dit geregistreerd als een virtuele "tik".

HeadGaze is voor iedereen

Cicek en zijn collega-ontwikkelaars creëerden HeadSwipe als een proof of concept. Met deze app kunnen gebruikers winkelen op eBay zonder de iPhone X aan te raken. Maar HeadGaze is niet beperkt tot die software. "Ons modulaire codeontwerp stelt ontwikkelaars in staat om onze functies eenvoudig te integreren in hun bestaande of toekomstige apps met minimale codewijziging", belooft Cicek.

De promovendus ziet mogelijke voordelen voor allerlei gebruikers. “Met HeadGaze kun je scrollen en communiceren op je telefoon met alleen subtiele hoofdbewegingen. Denk aan alle manieren waarop dit tot leven kan worden gebracht. Ben je het zat om tijdens het koken met vette vingers door een recept op je telefoonscherm te scrollen? Te rommelig om de handleiding op je mobiele telefoon te volgen terwijl je aan de motor van de auto onder de motorkap sleutelt? Te koud om je handschoenen uit te trekken om je telefoon te gebruiken?”

De iPhone X is de enige huidige telefoon met een TrueDepth-camera en daarom de enige die deze software kan uitvoeren. Er wordt echter verwacht dat Apple onthullen morgen drie nieuwe modellen met TrueDepth-ondersteuning.