Af alle de ting, Apple afslørede tirsdag, var den mest imponerende for mig iPhone 13s nye filmiske tilstand. Dybdeskarphedseffekten skaber fantastiske fokusovergange mellem emner.
Apple byggede dybest set en AI -filmfotograf i iPhone 13.
Whodunnit
Filmisk tilstand markerer en ny æra inden for beregningsfotografering, der læner sig op ad digital behandling for at producere fantastiske fotografiske effekter, der konkurrerer eller overstiger, hvad der kan opnås med traditionelle kameraer og linser.
Videokameraet i iPhone 13 analyserer kontinuerligt scenen og kan genkende, når motiver bevæger sig ind i billedet - og fokusere på dem.
Hvis motivet derefter vender hovedet væk for at se på noget, fokuserer kameraet automatisk på det, de ser på. Det er, som navnet antyder, meget filmisk - og det sker automatisk i software.
Apple viste filmtilstand frem i en kort film optaget helt på en ny iPhone 13. Tjek det herunder:
Se på skuddet ved 1:02 -mærket, hvor hunden vender sig for at se på butleren, der står bag det. Først fokuserer skuddet på hunden. Derefter fokuserer det på butleren. Dette er den slags skud, du let kan forestille dig normale brugere som os, der prøver. Og hvis resultaterne bliver som Apples, vil det give nogle gode hjemmefilm.
Ingen lille bedrift
Apple siger, at det ikke var en lille bedrift at bringe filmisk tilstand til iPhone.
For det første genererer systemet masser af dybdedata, så det kender den præcise afstand til alle mennesker, kæledyr og steder i en scene. Det gør dette hele tiden ved 30 fps. Derefter Neural motor, som er blevet uddannet til at opføre sig som en Hollywood -kinematograf og fokustrækker i ét, træffer løbende beslutninger om, hvad der skal være i fokus, og anvender en glat fokusovergang, hvis det ændrer sig.
"Den store beregningskraft, der er nødvendig for at køre maskinlæringsalgoritmerne, gengive ændringer i autofokus, understøtter manuelle fokusændringer, og karakterer hvert billede i Dolby Vision - alt i realtid - er forbløffende, ” sagde virksomheden på sin hjemmeside.
Men det er ikke helt strengt automatisk: Du kan tage kontrol over systemet, mens du skyder, eller justere det bagefter, mens du redigerer.
Ny æra inden for beregningsfotografering
Foto: Apple
Filmisk tilstand er imponerende, fordi iPhone 13 -kameraet kender til hvad den kigger på. Det er et stort fremskridt for beregningsfotografering, som har eksisteret i et stykke tid. Tidlige eksempler omfatter digitale panoramaer, der er syet sammen i software eller fotos med højt dynamisk område, som kombinerer flere billeder, der er taget med forskellige eksponeringer, til ét billede.
Vi går nu ind i en æra, hvor kameraet kan udføre langt mere interessante og indviklede beregninger. For eksempel giver lysfelteffekter - tilføjelse af 3D -information til scenen - mulighed for imponerende Portræteffekter eller justering af bokeh i efterproduktion.
Apples ny Live Text -funktion, der snart rulles ud i iOS 15, er en tilsvarende imponerende funktion, der genkender tekst i en scene og gør den redigerbar til at klippe eller passere til en anden app. Jeg har leget med det i iOS -betaen, og det er lidt mirakuløst. Det genkender endda (nogle) af min forfærdelige, spidery håndskrift.
Og tag Visual Lookup, også i iOS 15, som kan identificere planter, dyr, vartegn, kunstværker og andre objekter i dit Fotos bibliotek.
I alle disse eksempler er kameraet ikke bare et dumt stykke glas og metal. Den indbyggede AI kan genkende ting og objekter i scenen. Og ikke kun på fotos. Det fungerer nu i video i realtid.
Det gjenstår at se, om filmisk tilstand fungerer lige så godt i virkeligheden som i Apples demoer. Men wow, hvilken genial idé. Det får dig til at spekulere på, hvor langt Cupertino kan skubbe sit fantastiske kamera, som det smart forklædte som en slank smartphone.
