Da Apple introducerede ARKit i 2017, blev augmented reality-platformen hyldet som en game-changer. To år senere ser Apples AR -push klar til at levere den type oplevelse, der får CEO Tim Cook så begejstret, at han vil skrige.
Takket være en trio af nye augmented reality -værktøjer til iOS 13 og den meget reelle mulighed for en Apple AR headset i horisonten, lover 2019 at være starten på noget helt særligt for Apples augmented reality indsats.
Dette indlæg indeholder tilknyttede links. Cult of Mac kan optjene en provision, når du bruger vores links til at købe varer.
"Jeg ser personligt på AR som på et lignende sted som internettet i slutningen af 90'erne," siger Andrew Hart, grundlægger af AR -kortlægningsfirmaet Dent Reality, fortalte Cult of Mac. “Store spillere forstod klart potentialet og havde travlt med at hype det over for forbrugerne. Men de havde ikke helt fundet ud af brugergrænsefladen eller use cases. Det startede med, at folk for det meste byggede og designede deres egne nye websteder med prangende grafik og animationer, der ikke tidligere var muligt. Når vi havde lært, hvad disse anvendelsessager var, forsvandt nyhedsaspekterne, og internettet blev virkelig nyttigt. ”
Med tusinder af ARKit-aktiverede apps i App Store nu, er de fleste store spillere spil som AR Dragon, Maskinerne eller AR Smash Tanks!
Augmented reality: En verden uden for spil
Men mens AR -spil dominerer kategorien, begynder andre demoer at dukke op, der viser applikationer ud over spil. Tidligere på året viste WWDC Scholar og Georgia Tech -studerende Nicholas Grana en ARKit iMac -prototype frem. Du skal blot scanne et tastatur på en virtuel iMac -skærm, så brugerne kan udforske det. Selvom det kun er en demo, understreger det, hvor kraftfuld AR kan være.
Nicholas Grana
@nicholasgranaa
897
218
På samme måde bruger kortapps AR til at placere kontekstuelle oplysninger på virkelige scener. Og det er kun begyndelsen. Overvej f.eks. At bruge ARKit til vise besøgende omkring en Airbnb -leje. Eller ved hjælp af AR in sportstøj som svømmebriller.
Med Apple -enheder, der bliver stadig mere kraftfulde, baner Apple -software vejen for en AR -revolution.
Nye anvendelsessager til augmented reality
Nogle af disse typer AR -værktøjer fandt allerede vej til Apples softwarepakke. Jeg bruger jævnligt Mål ca. bagt i iOS 12 til kontrol af afstande.
I iOS 13, som skulle starte i denne måned, når nye iPhones ankommer, bruger Apple ARKit til at løse et af de mest irriterende problemer med FaceTime. Ved hjælp af AR -hånden justerer Apple digitalt brugernes øjenlinjer i realtid. Det betyder, at de kan kigge på deres skærme og stadig ser ud til at kigge lige ind i kameralinsen. Løsning af FaceTime øjenlinieproblem er et lille flor i teorien, men det er et stort, når det kommer til at gøre kommunikation mere naturlig.
Understreger kraften i AR, Apple begyndte for nylig at være vært AR går i sine største detailbutikker. Ligesom et virtuelt kunstgalleri viser disse AR [T] -vandringer augmented reality’s potentiale via fantastiske demoer skabt af topartister.
Sammenlignet med tidligere Apple -tidslinjer burde vi sidde på kanten af en AR -revolution, siger Taylor Freeman, CEO for Axon Park.
"Det tog virkelig cirka tre år for iPhone at få en anstændig penetration," sagde Taylor Freeman, administrerende direktør for virtual reality -uddannelsesfirma Axon Park. "Med det som en sammenligning kom ARKit ud i 2017, så hvis vi ikke kan se en 'killer-app' i midten af 2020, har vi grunde til at bekymre sig."
Foto: Brian Mueller/CARROT
AR er Tim Cooks baby
Det er ingen hemmelighed, at ARKit er Apples administrerende direktør Tim Cooks baby. Ligesom Steve Jobs engang skyllede over Mac'en som en "cykel til sindet" og iTunes som en "musikrevolution", taler Cook om augmented reality som en sand teknisk paradigmeskifter.
"Vi har verdens største augmented-reality-aktiverede platformog tusindvis af ARKit-aktiverede applikationer i App Store, ”sagde Cook under Apples opkald til indtjening i 3. kvartal 2019. Under præsentationen til Wall Street -investorer og -analytikere i sommer malede Cook AR som et område modent til vækst.
"Baseret på denne strategi og vores momentum på dette område introducerede vi tre nye AR-baserede teknologier," sagde han. "Vores udviklere kører allerede med disse nye teknologier, og vi tror, at vores kunder vil elske nogle af de apps, disse skabere har i vente i de kommende måneder."
De tre planker i Apple AR -platform er ARKit, RealityKit og Reality Composer. Sammen med den avancerede hardware i de nyeste Apple -enheder står de klar til at udløse en AR -eksplosion.
Viser potentialet ved AR
På dette års Worldwide Developers Conference viste Craig Federighi, Apples senior vice president for software engineering, virksomhedens spirende augmented reality -platform frem. På scenen foran udviklere og journalister fokuserede han på AR -forbedringer, der driver optagelse af bevægelser og "folkeklusion", som lader apps placere levende mennesker i augmented reality -scener.
"Nu er det vanvittigt," sagde Federighi, da en kvinde gik gennem et værelse fyldt med overdimensionerede, animerede legetøj. ”Det, der før krævede omhyggelig sammensætning i hånden, kan nu gøres i realtid. Nu ved at vide, hvor disse mennesker er i scenerne, kan du se, at vi kan lagre virtuelt indhold foran og bag dem. ”
Real-time motion capture
Derefter viste han de motion-capture-muligheder, der uden tvivl vil brænde millioner af Andy Serkis-stil interaktioner.
"Og tjek dette: motion capture!" Sagde Federighi som en virtuel i naturlig størrelse kunstnerens artikulerede mannequin problemfrit efterlignede mandens bevægelser ved siden af. ”Ret dit kamera mod en person, og vi kan i realtid spore positionerne af deres hoved, deres torso og deres lemmer og fodre det som et input til AR -oplevelsen. Nu vil udviklere gøre fantastiske ting med ARKit 3. ”
(Du kan se Federighis AR -udstillingsvindue, herunder demoer, der appellerede, i videoen herunder.)
Apple værktøjer til augmented reality
ARKit 3
På scenen ved WWDC 2019 ringede Federighi ARKit 3, den tredje iteration af Apples ramme for augmented reality, en "større opdatering." Blandt andet bruger den on-device, real-time maskinlæring til at genkende den menneskelige form og problemfrit integrere mennesker i AR erfaringer.
"Den nye funktion" okklusion af mennesker "i ARKit er virkelig vild," siger Brian Mueller, grundlægger af Grailr og skaber af den snarky gulerodsserie apps, fortalte Cult of Mac. “Det genkender, at virkelige mennesker er til stede i videostrømmen, der kommer ind fra enhedens kamera. [Det derefter] gør det muligt for AR -objekter at se ud til at 'gå bag' disse mennesker, hvilket i høj grad øger nedsænkningsfaktoren. Det er bare vanvittigt, at Apple er i stand til at udføre denne mængde behandling af billedet, der kommer ind fra kameraet, helt live, som det sker. ”
RealityKit
Det andet stykke af Apple AR -puslespillet er den nye udviklerramme, RealityKit. Denne ramme gør det muligt at implementere højtydende 3D-simulering og gengivelse i AR-apps. Det gør det muligt at skabe mere overbevisende oplevelser ved at lade udviklere importere detaljerede aktiver og lydkilder i deres AR-verdener. Ved hjælp af RealityKit kan animerede objekter reagere på ændringer i miljøet.
"RealityKit var en teknisk genstart af AR for Apple," sagde Dent Reality's Hart. ”De byggede oprindeligt AR oven på SceneKit, deres eksisterende 3D -gengivelsesmotor, men med RealityKit startede de fra bunden med deres gengivelses- og interaktionsteknologier. Dette giver dem ydelsesfordele og giver dem mulighed for at gøre det lettere for almindelige udviklere at bygge til AR. ”
Virkelighedskomponist
Det tredje stykke af Apples AR -softwareinitiativ er Virkelighedskomponist, hvilket gør det lettere at oprette AR -indhold til mennesker med begrænset eller ingen 3D -oplevelse.
Apple "gør det meget lettere for udviklere at implementere AR -teknologi i deres apps" Grailrs Mueller sagde. "RealityKit gør det superenkelt at importere 3D-aktiver og lege med ejendomme og animationer."
Foto: Apple
Oplevelseskonsistens i Apple augmented reality
Tilsammen bør disse værktøjer gøre det lettere for udviklere at integrere AR i deres apps. Der er dog nogle begrænsninger. Funktioner som folks okklusion og sporing af flere ansigter er understøttes kun på avancerede enheder som iPhone XS, drevet af Apples A12/A12X Bionic -chips og TrueDepth -kamera. Det betyder, at mange af de bedste AR -apps ikke fungerer på ældre iPhones.
Hart bemærkede også, at der er et problem med konsistens, når det kommer til AR -apps. Dette kan blive mere besværligt, når AR tager fart. Lavere adgangsbarrierer (takket være Apples forstærkede AR-værktøjer til udviklere) burde betyde flere AR-apps i App Store. Men kun at kunne køre dem på et begrænset undersæt af enheder ville naturligvis begrænse væksten af AR i Apples økosystem.
Visse Apple -teknologier, som f.eks. MacBooks Touch Bar eller 3D Touch på iPhone, blev aldrig rigtig universelt nyttige. Små, dedikerede grupper vil måske elske dem, men inkonsekvent implementering betyder, at brugerne ikke ved, hvad de kan forvente af deres enheder. Apple kunne gøre mere for at hjælpe udviklere med at skabe konsekvente AR -oplevelser.
"En ting, der i øjeblikket mangler, er materielle eksempler på brugeroplevelse," sagde Hart. “AR er et helt nyt grænsefladeparadigme, ligesom en GUI eller en berøringsskærm. Men der er i øjeblikket ingen rammer for at bygge virkelig overbevisende AR -oplevelser. Apple har deres AR Human Interface Retningslinjer, der berører nogle ideer på højt niveau om, hvordan man præsenterer en overbevisende oplevelse, såsom at sikre tekstskalaer baseret på brugerens afstand, for altid at blive vist i en ensartet størrelse. Men der er ingen tekniske rammer, der implementerer dette - hver udvikler skal eksperimentere med 3D -motoren og selv udvikle disse fælles oplevelsesfunktioner. Dette er noget, jeg gerne vil se Apple tage føringen på - og forvente, at de vil med RealityKit 2.0. ”
Fremtiden er Apple AR -briller
Foto: Lewis Wallace/Cult of Mac
En ting, som alle er enige om, er, at Apple lige er begyndt med augmented reality.
"Jeg skal se denne grundlæggende genstart, kun to år efter platformen, som en genindvielse af Apples engagement i AR og deres fremtidige AR-baserede produkter," sagde Hart. "Fokus på ydeevne gør dem naturligvis i stand til at bevæge sig mod et letvægts AR -bærbart produkt."
Dette AR -headset -projekt er i sidste ende, hvor brugerne vil se den sande værdi af ARKit.
"Apples nuværende arbejde i AR-rummet lægger grundlaget for en hovedmonteret displayfremtid," sagde Axon Parks Freeman. “Der er bestemt en masse nytteværdi og værdi, der kan skabes ved hjælp af fladskærms-AR. Men den virkelige magi vil ske, når alt bliver flyttet til glas. ”
Hvornår kommer Apple AR -briller?
Vi ved stadig ikke, hvornår eller om Apples AR -briller bliver en realitet. De kan dog være tættere på, end du tror. Faktisk aktiver for nylig dukkede op i iOS 13 beta der ser ud til at referere til et AR -headset af en eller anden art.
Får vi vores første glimt af et Apple -headset i næste uge på iPhone 11 begivenhed?
"Hvem ved, hvor langt væk [et Apple AR -headset] er, men fordelen er indlysende," sagde Grailrs Mueller. "Ikke kun ville AR -elementer blive lagt over det, vi rent faktisk ser i modsætning til at skulle se dem gennem en telefons skærm, men AR vil også være meget mere vedholdende. I stedet for at skulle starte apps, skal du vente på, at de genkender scenen omkring dem, og derefter tilføje deres AR -elementer i den, AR -elementerne vil bare altid være der, lagt over det, vi ser. ”
Indtil videre har ingen været i stand til at trække smarte briller effektivt ud. Google Glass blev et berygtet flop. Snap er ny Briller 3, der tilsyneladende er bygget med AR i tankerne, ser ikke meget bedre ud. Men Apple arbejder på at ændre ting. Den helt hemmelige gruppe, der udvikler Cupertinos AR-briller fik for nylig en ny leder. Kim Vorrath er angiveligt anklaget for at "bringe ordre til AR -headset -teamet."
Med hårdere og mere fokuseret ledelse arbejder Apple sikkert på at gøre sit AR -headset til virkelighed. Ifølge analytiker Ming-Chi Kuo kunne et par AR-briller med Apple-mærke lanceres så snart som 2020.
Ved at lægge kraftfulde softwareværktøjer i hænderne på udviklere og kraftfulde enheder i brugernes hænder (og sandsynligvis på vores ansigter), lægger Apple det nødvendige fundament, der vil gøre augmented reality til en kraft, der skal regnes med med.
Hold øje med dette rum.
