En fantastisk ny augmented reality -demo viser hvordan fremtiden for klippe, kopiere og lime inn kan fungere.
Laget av Cyril Diagne, en 34 år gammel kunstner, designer og programmerer som for tiden bor på Google Arts & Culture Lab i Paris, viser demoen bilder av objekter som dras fra den virkelige verden og slippes inn i Photoshop på en Mac. Det er en AR -applikasjon som enhver designer kan komme ombord med!
Cyril Diagne
@cyrildiagne
44,7 tusen
15,9K
AR -kopierings- og limedemonstrasjonen drar fordel av noen fine fremskritt innen maskinlæring. Som Skriver Diagne på Twitter, den "hemmelige sausen" er BASNet, et verktøy designet for tydelig gjenkjenning og fjerning av bakgrunn. Som Photoshop Magnetic Lasso, oppdager programvaren kantene på et fysisk objekt og frigjør det deretter fra omgivelsene. Diagne delte mange flere detaljer om a
dedikert Github -side."Dette er en prototype som bruker telefonkameraet til å fange, trekke ut og lime inn objekter fra omgivelsene dine direkte til photoshop," fortalte Diagne Cult of Mac. "Takk til OpenCV SIFT, en bildesporingsteknologi, er appen i stand til å oppdage hvor telefonen peker mot skjermen, noe som gjør det til en sømløs opplevelse. Det er en del av en serie eksperimenter jeg gjør hver helg for å utforske hvordan maskinlæring og AI kan bidra til å skape mer digitale interaksjoner som er mer naturlige. I utgangspunktet bruker vi algoritmens ‘intelligens’ til å fjerne lagene av abstraksjoner vi måtte bygge i digitale grensesnitt til nå. ”
Kommer snart til en telefon i nærheten av deg?
I demoen, lagt ut søndag, utførte Diagne kopien og limingen ved hjelp av en Android -telefon og en MacBook Pro. Diagne sa at demonstrasjonen ikke ble opprettet ved hjelp av ARKit eller Googles ARCore, selv om det i fremtiden kan "låse opp noen veldig interessante scenarier."
Diagne sa at han først ikke tenkte på å utvikle sitt AR -verktøy lenger. Svaret på demoen får ham imidlertid til å tenke nytt om dette. "Når jeg ser responsen og entusiasmen fra reklamer på tvers av disipliner, tror jeg det ville være fornuftig å utvikle funksjonen til en mobilapp," sa Diagne. "Teknisk sett er det noen sårt tiltrengte forbedringer som må gjøres-men ingenting er umulig."
Akkurat nå er alt dette fremdeles bevis-på-konseptet. Selv om interesserte brukere kan få det til å fungere som en demo, ikke forvent at det skal fungere sømløst. (Du trenger også litt kodingskunnskap for å få det i gang.) Men så langt går det til glimrende demonstrasjoner av AR? Dette er ganske fantastisk. Ikke rart Tim Cook er det så spent på augmented reality!