Apple's aankomende augmented reality head-mounted display zal worden bestuurd door eye-tracking-technologie, zegt TF International Securities-analist Ming-Chi Kuo in een notitie die vrijdag naar klanten is gestuurd.
In plaats van handbedieningen te gebruiken, kan de technologie de oogbewegingen van de drager detecteren en knippert en berekent vervolgens onmiddellijk de vereiste informatie zodat deze zichtbaar is op de micro-OLED van het apparaat Scherm.
Apple's eye-tracking-technologie
In zijn nieuwe notitie, gezien door Cult of Mac, geeft Kuo nog een paar details over dit systeem - evenals de fabrikanten die mogelijk betrokken zijn:
“Die eye-tracking wordt een van de belangrijkste gebruikersinterfacetechnologieën voor AR/MR. Wij zijn van mening dat SensoMotoric Instruments (SMI) de eye-tracking-ontwerpoplossing en -algoritmen van Apple levert en dat Primax de enige leverancier is van de eye-tracking-zendermodule. We weten nog steeds niet of de Apple HMD irisherkenning kan ondersteunen, maar de hardwarespecificaties suggereren dat het apparaat deze functie kan implementeren."
Onderzoekers zijn al een tijdje bezig met eye-tracking-technologie. Robotici demonstreerden bijvoorbeeld: vliegen met een drone met behulp van eye-tracking anno 2018. Anderen willen eye-tracking gebruiken voor reclamedoeleinden, door te onthullen waar de aandacht van een kijker op is gericht.
De AR-headset van Apple zou echter de eerste succesvolle massamarktimplementatie kunnen zijn van eye-tracking voor de bediening van een op het hoofd gemonteerd display. Het zou een game-changer zijn als Apple het voor elkaar krijgt.
Een meer intuïtieve gebruikerservaring
Kuo merkt op dat dit een zeer intuïtieve gebruikerservaring zou bieden. "Een gebruiker kan bijvoorbeeld continu knipperen om een menu te activeren", schrijft hij. "Of wanneer een gebruiker een paar seconden naar een tastbaar object kijkt, verschijnt er een venster met informatie over dat object."
Het kan ook nuttig zijn om energie te besparen. Een van de grootste uitdagingen van een head-mounted display is hoe de verwerking op een geoptimaliseerde manier kan worden uitgevoerd. Kuo merkt op dat de headset met behulp van eye-tracking kan bepalen welk gebied van het beeld moet worden geoptimaliseerd. Dit zou gebaseerd zijn op waar de gebruiker op dat moment direct naar kijkt.
Daarnaast geeft hij enkele algemene technische details over hoe het systeem zal werken:
“Het eye-trackingsysteem van Apple bestaat uit de zender en ontvanger. De zender levert een of meer verschillende golflengten van onzichtbaar licht, en de ontvanger detecteert veranderingen in de reflectie van onzichtbaar licht door het oog en gebruikt deze veranderingen om het oog te bepalen beweging."
Apple volgde eerder meerdere patenten met betrekking tot eye-tracking-technologie. Tot op heden heeft het bedrijf deze echter niet in een product geïmplementeerd.
Mogelijke irisherkenningstechnologie
Ten slotte suggereert Kuo dat er een kans is dat de AR-headset van Apple irisherkenning kan bieden. Vermoedelijk zou dit een vorm van biometrische authenticatie zijn, vergelijkbaar met Face ID of Touch ID, maar gericht op de iris. Kuo zegt dat de hardware dit zou kunnen ondersteunen. Het blijft echter onduidelijk of Apple deze route zal inslaan.
Kuo suggereerde eerder dat de AR-headset van Apple zal medio 2022 debuteren. Hij beweert dat het zal beschikken over 15 ingebouwde cameramodules.