Кінематографічний режим iPhone 13 знаменує собою нову еру в обчислювальній фотографії

З усіх речей, які Apple відкрила у вівторок, для мене найбільш вражаючим був новий кінематографічний режим iPhone 13. Ефект глибини різкості створює дивовижні переходи фокусування між об'єктами.

Apple в основному вбудувала оператора штучного інтелекту в iPhone 13.

Університет

Кінематографічний режим позначає нову еру в обчислювальній фотографії, яка спирається на цифрову обробку дивовижні фотографічні ефекти, які перевершують або перевищують те, що можна досягти за допомогою традиційних камер і лінзи.

Відеокамера в iPhone 13 безперервно аналізує сцену і може розпізнавати, коли об’єкти переходять у кадр, і фокусуватись на них.

Якщо потім об’єкт відверне голову, щоб подивитися на щось, камера автоматично сфокусується на тому, на що він дивиться. Як випливає з назви, це дуже кінематографічно - і це робиться автоматично в програмному забезпеченні.

Apple показала кінематографічний режим у короткометражному фільмі, знятому повністю на новому iPhone 13. Перевірте це нижче:

Подивіться на постріл на позначці 1:02, де собака повертається, щоб подивитися на дворецького, що стоїть за ним. Спочатку постріл зосереджений на собаці. Потім він зосереджується на дворецькому. Це такий знімок, який ви можете легко уявити, як намагаються звичайні користувачі, такі як ми. І якщо результати будуть такими ж, як у Apple, це стане чудовим домашнім фільмом.

Не малий подвиг

Apple заявляє, що введення режиму «Кінематографічний» на iPhone було «не маленьким подвигом».

По -перше, система генерує масу глибинних даних, щоб вона знала точну відстань до всіх людей, домашніх тварин та місць на сцені. Він робить це постійно зі швидкістю 30 кадрів в секунду. Тоді Нейронний двигун, який був навчений діяти як голлівудський оператор і знімач фокуса в одному, приймає постійні рішення про те, що повинно бути у фокусі, і застосовує плавний перехід до фокусу, якщо це зміниться.

«Велика обчислювальна потужність, необхідна для запуску алгоритмів машинного навчання, візуалізації змін автофокусування, підтримка ручних змін фокусування, і оцінка кожного кадру в Dolby Vision - все в режимі реального часу - вражає », - йдеться на сайті компанії.

Але не все суворо автоматично: ви можете взяти під контроль систему під час зйомки або змінити її пізніше під час редагування.

Нова ера в обчислювальній фотографії

Кінематографічний режим вражає, тому що камера iPhone 13 знає на що воно дивиться Це великий прогрес для обчислювальна фотографія, який існує деякий час. Ранні приклади включають цифрові панорами, зшиті разом у програмному забезпеченні, або фотографії з високим динамічним діапазоном, які об’єднують кілька зображень, зроблених з різною експозицією, в одне зображення.

Зараз ми вступаємо в еру, коли камера може виконувати набагато цікавіші та складніші обчислення. Наприклад, ефекти світлового поля - додавання тривимірної інформації до сцени - дозволяє вражати Портретні ефекти або коригування боке в постпродукції.

Apple нова функція живого тексту, яка має бути незабаром випущена в iOS 15, - це така ж вражаюча функція, яка розпізнає текст у сцені та робить його редагованим для вирізання або переходу в інший додаток. Я бавився з ним у бета -версії iOS, і це якось дивно. Він навіть розпізнає (деякі) мої жахливі, павутинні почерки.

А також візуальний пошук, також у iOS 15, який може ідентифікувати рослини, тварин, орієнтири, твори мистецтва та інші об’єкти у вашій бібліотеці фотографій.

У всіх цих прикладах камера - це не просто тупий шматок скла та металу. Вбудований AI може впізнати речі та предмети на сцені. І не тільки на фотографіях. Зараз він працює у режимі відео в режимі реального часу.

Залишається з'ясувати, чи працює кінематографічний режим так само в реальному житті, як і в демонстраціях Apple. Але вау, яка блискуча ідея. Це змушує задуматися, наскільки далеко Купертіно може просунути свою дивовижну камеру, яку він спритно замаскував під стрункий смартфон.