Kjempeflott AR-demo viser fremtiden for kopiering og liming

En fantastisk ny augmented reality -demo viser hvordan fremtiden for klippe, kopiere og lime inn kan fungere.

Laget av Cyril Diagne, en 34 år gammel kunstner, designer og programmerer som for tiden bor på Google Arts & Culture Lab i Paris, viser demoen bilder av objekter som dras fra den virkelige verden og slippes inn i Photoshop på en Mac. Det er en AR -applikasjon som enhver designer kan komme ombord med!

Cyril Diagne

@cyrildiagne

4/10 - Klipp og lim inn omgivelsene i Photoshop. Kode: https://t.co/cVddH3u3ik Bok: @HOLOmagazine Plagg: SS17 by @thekarentopacio Type: Sainte Colombe av @MinetYoann@ProduksjonstypeTeknisk innsikt: ↓ #ML #AR #AI #AIUX #Adobe #Photoshophttps://t.co/LkTBe0t0rF
Bilde
14:02 · 3. mai 2020

44,7 tusen

15,9K

AR -kopierings- og limedemonstrasjonen drar fordel av noen fine fremskritt innen maskinlæring. Som Skriver Diagne på Twitter, den "hemmelige sausen" er BASNet, et verktøy designet for tydelig gjenkjenning og fjerning av bakgrunn. Som Photoshop Magnetic Lasso, oppdager programvaren kantene på et fysisk objekt og frigjør det deretter fra omgivelsene. Diagne delte mange flere detaljer om a

dedikert Github -side.

"Dette er en prototype som bruker telefonkameraet til å fange, trekke ut og lime inn objekter fra omgivelsene dine direkte til photoshop," fortalte Diagne Cult of Mac. "Takk til OpenCV SIFT, en bildesporingsteknologi, er appen i stand til å oppdage hvor telefonen peker mot skjermen, noe som gjør det til en sømløs opplevelse. Det er en del av en serie eksperimenter jeg gjør hver helg for å utforske hvordan maskinlæring og AI kan bidra til å skape mer digitale interaksjoner som er mer naturlige. I utgangspunktet bruker vi algoritmens ‘intelligens’ til å fjerne lagene av abstraksjoner vi måtte bygge i digitale grensesnitt til nå. ”

Kommer snart til en telefon i nærheten av deg?

I demoen, lagt ut søndag, utførte Diagne kopien og limingen ved hjelp av en Android -telefon og en MacBook Pro. Diagne sa at demonstrasjonen ikke ble opprettet ved hjelp av ARKit eller Googles ARCore, selv om det i fremtiden kan "låse opp noen veldig interessante scenarier."

Diagne sa at han først ikke tenkte på å utvikle sitt AR -verktøy lenger. Svaret på demoen får ham imidlertid til å tenke nytt om dette. "Når jeg ser responsen og entusiasmen fra reklamer på tvers av disipliner, tror jeg det ville være fornuftig å utvikle funksjonen til en mobilapp," sa Diagne. "Teknisk sett er det noen sårt tiltrengte forbedringer som må gjøres-men ingenting er umulig."

Akkurat nå er alt dette fremdeles bevis-på-konseptet. Selv om interesserte brukere kan få det til å fungere som en demo, ikke forvent at det skal fungere sømløst. (Du trenger også litt kodingskunnskap for å få det i gang.) Men så langt går det til glimrende demonstrasjoner av AR? Dette er ganske fantastisk. Ikke rart Tim Cook er det så spent på augmented reality!

Siste blogginnlegg

Hvordan oversette nettsider på iPhone eller iPad
October 21, 2021

Hvordan oversette nettsider på iPhone eller iPadCult of Mac på katalansk!Foto: Charlie Sorrel/Cult of MacHar du noen gang sett deg selv stirre på e...

I dag i Apples historie: Apple knuser Think Secret -rykter
October 21, 2021

19. desember 2007: Apple avgjør et søksmål med reporter Nick Ciarelli, noe som resulterer i lukking av Tenk hemmelig, hans massivt populære Apple -...

Gjennomgang: UAG Trooper iPhone lommebokveske
October 21, 2021

Som offer for en dårlig laget iPhone-lommebok som mistet ID-en og kredittkortet mitt, er jeg alltid forsiktig når jeg prøver en ny. Jeg liker å bær...