Unohda vain animoidut avatar-kasvot: Carnegie Mellonin yliopiston tiimi haluaa tuoda koko kehon animojit maailmalle. Carnegie Mellonin yliopiston ihmisen ja tietokoneen välisen vuorovaikutusinstituutin Future Interfaces -ryhmän johtajana Chris HarrisonTehtävänä on auttaa luomaan huomisen tietokoneen ominaisuuksia.
Tällä viikolla esitellyssä äskettäin julkaistussa demossa Harrisonin tiimi on keksinyt tavan päästä säännöllisesti iPhonet seuraavat koko vartaloa vain etukameralla-arvioimalla muun kehon on tekemässä.
Se toimii yllättävän hyvin.
Pose-on-the-Go
"Älypuhelimella ei ole mahdollisuutta nähdä koko kehoa, joten meidän on oltava älykkäitä ja yhdistettävä useita anturitietolähteitä tarkan arvion luomiseksi", Harrison kertoi Macin kultti. ”Tarkemmin sanottuna sulautamme tietoja etu- ja takakamerasta, käyttäjälle suunnatusta syvyyskamerasta-mitä Apple kutsuu TrueDepth-kameraksi-inertiamittausyksiköstä (IMU) ja kosketusnäytöstä. Nämä erilaiset anturit tarjoavat erilaisia vihjeitä kehon asentamisesta. Esimerkiksi [he voivat kertoa meille], missä käyttäjän kädet ovat tai kävelevätkö he. ”
"Pose-on-the-Go" -niminen järjestelmä voisi antaa iOS-kehittäjille mahdollisuuden rakentaa sovelluksia koko kehon asennossa. Sen sijaan, että Pose-on-the-Go tarvitsisi käyttää elokuvan liiketallennustyylistä pukua, se ei vaadi muuta kuin nykypäivän iPhoniin jo asennetut anturit. Älykkäät algoritmit sulauttavat nämä tiedot yhteen. Tulokset voivat arvioida tarkasti käyttäjän asennon - myös liikkeessä.
Kuva: Carnegie Mellon University
Pelaamisesta koko kehon Animojiin
"Se on edelleen arvio, ja ohjelmistoa voidaan huijata, mutta kaiken kaikkiaan se on melko hyvä", Harrison sanoi. "Vertasimme järjestelmäämme Hollywood-luokan liiketallennusjärjestelmään, ja kaikkien nivelten-pään, käsivarsien, jalkojen-keskimääräinen virhe oli [vain] 20,9 cm."
Yhdessä vaikuttavassa demossa tiimi näyttää henkilön, joka juoksee seinään ja laskeutuu sitten alas. Seuranta ei niinkään ohita lyöntiä.
"Luulen, että käyttötarkoituksia on monia, harjoitussovelluksista, jotka laskevat toistosi ja antavat sinulle laadukasta palautetta, koko kehon pelikokemuksiin, joissa sinun täytyy juosta, hypätä ja antautua", Harrison jatkoi. ”Yksi itsellemme tekemistämme sovelluksista oli fantasiapeli, jossa voit käyttää loitsuja käsilläsi. Toinen söpö demo oli kokovartaloinen Animoji, jossa käyttäjät voivat heiluttaa, tanssia ja kävellä. ”
Tappajasovellus tulevalle iPhonelle?
Onko mitään mahdollisuutta, että tämä leivotaan tulevaan iPhoneen? Siitä ei ole sanaa, ja toistaiseksi tämä on hyvin todiste konseptista. Future Interfaces Group on kuitenkin yksi tutkimuslaboratorioista, joita Piilaakson huippuyritykset pitävät silmällä. Entiset Harrisonin opiskelijat ovat siirtyneet työskentelemään joillekin suurille teknologiajätteille-mukaan lukien Apple.
Mutta vaikka Apple ei virallisesti hyväksy tätä tekniikkaa, se ei tarkoita, että et näe tätä tulevassa iPhone -sovelluksessa. "Suunnittelemme avoimen lähdekoodin julkaisua suurelle osalle koodistamme", Harrison sanoi. "Koska tämä on kaikki ohjelmistot - uusia laitteita tai dongleja ei tarvita - tämä voidaan ottaa käyttöön monissa nykyaikaisissa älypuhelimissa ohjelmistopäivityksenä."
Tutkijat esittelivät Pose-on-the-Go: n tämän viikon ACM-konferenssissa, joka käsitteli ihmisjärjestelmiä tietokonejärjestelmissä. Voit lukea a paperi, joka kuvaa työtä täällä.
Onko sinulla ideoita siitä, miten haluaisit nähdä tämän tekniikan käytön? Kerro meille ajatuksistasi alla olevissa kommenteissa.
