Felejtsd el csak az animált avatar-arcokat: a Carnegie Mellon Egyetem csapata teljes testű animojikat akar hozni a világnak. A Carnegie Mellon Egyetem Humán-Számítógépes Interakciós Intézetének Future Interfaces Group igazgatójaként Chris HarrisonFeladata, hogy segítsen létrehozni a holnapi számítógép funkcióit.
A most bemutatott, a héten bemutatott demóban Harrison csapata kitalálta a módját, hogy rendszeresen engedje Az iPhone teljes testkövetést végez, csak az előlapi kamerával-úgy, hogy megbecsüli a test többi részét csinálja.
Meglepően jól működik.
Pose-on-the-Go
"Az okostelefon nem tudja látni az egész testet, ezért okosnak kell lennünk, és több érzékelőadat -forrást kell kombinálnunk, hogy pontos becslést hozzunk létre" - mondta Harrison Mac kultusz. „Pontosabban, összeolvasztjuk az elülső és hátsó kamerák adatait, a felhasználó felé néző mélységi kamerát-amit az Apple TrueDepth kamerának nevez-az inerciamérő egységet (IMU) és az érintőképernyőt. Ezek a különböző érzékelők különböző nyomokat adnak a test helyzetéről. Például [meg tudják mondani nekünk], hogy hol vannak a felhasználó karjai, vagy ha járnak. ”
A „Pose-on-the-Go” elnevezésű rendszer lehetővé teheti az iOS fejlesztők számára, hogy alkalmazásokat készítsenek teljes testpóz használatával. Ahelyett, hogy mozgókép-rögzítés stílusú öltönyt kellene viselnie, a Pose-on-the-Go nem igényel mást, mint a mai iPhone-ba már beépített érzékelőket. Az intelligens algoritmusok ezt az információt összeolvasztják. Az eredmények pontosan meg tudják becsülni a felhasználó pózát - még mozgásban is.
Fotó: Carnegie Mellon Egyetem
A játéktól a teljes testű Animoji-ig
"Ez még csak becslés, és a szoftvert át lehet csalni, de összességében nagyon jó" - mondta Harrison. „Összehasonlítottuk rendszerünket egy hollywoodi szintű mozgásrögzítő rendszerrel, és az összes ízületben-fej, kar, láb-az átlagos hiba [mindössze] 20,9 cm volt.”
Egy lenyűgöző demóban a csapat azt mutatja, hogy egy személy felugrik a falhoz, majd lehajol. A követés nem annyira, mint kihagy egy ütemet.
„Azt hiszem, sokféle felhasználási módja van, az edzésalkalmazásoktól, amelyek számolják az ismétléseket, és minőségi visszajelzést adnak, egészen a teljes testet átfogó játékélményig, ahol futni, ugrani és kacsázni kell”-folytatta Harrison. „Az egyik alkalmazás, amelyet magunknak készítettünk, egy fantáziajáték volt, ahol a kezével varázsolhat. Egy másik aranyos bemutató a teljes testű Animoji volt, ahol a felhasználók integethettek, táncolhattak és sétálhattak. ”
Gyilkos alkalmazás egy jövőbeli iPhone -hoz?
Van rá esély, hogy ez egy jövőbeli iPhone -ba sül? Erre nincs szó, és ez egyelőre a koncepció bizonyítéka. A Future Interfaces Group azonban azon kutatólaboratóriumok közé tartozik, amelyeken a Silicon Valley legjobb vállalatai folyamatosan figyelnek. Az ex-Harrison diákok dolgoztak néhány nagy technológiai óriásnál-az Apple is.
De még ha az Apple hivatalosan nem is fogadja el ezt a technológiát, ez nem jelenti azt, hogy ezt nem fogja látni egy jövőbeni iPhone -alkalmazásban. „Nyílt forráskódú kiadást tervezünk kódunk nagy részére” - mondta Harrison. "Mivel ez minden szoftver - nincs szükség új hardverre vagy hardverkulcsra -, ez sok modern okostelefonon engedélyezhető szoftverfrissítésként."
A kutatók a Pose-on-the-Go-t mutatták be a heti ACM konferencián, amely a számítástechnikai rendszerek emberi tényezőiről szólt. Elolvashatja a a munka leírása itt.
Van ötlete, hogyan szeretné látni ezt a technológiát? Ossza meg velünk gondolatait az alábbi megjegyzésekben.
