Демистифицируя режим киноэффектов в iPhone 13, вот как это сделала Apple

Я помню, как в молодости смотрел документальный фильм, в котором объяснялось разделение труда, стоящее за фильмом. И фотографов часто сопровождает сопровождающий, который как будто у каждого гольфиста будет кэдди, а у каждого участника ралли будет навигатор, который стал почти стандартом в киноиндустрии.

Повторитель фокусировки в основном только обеспечивает соответствие фокальной точки (фокальной плоскости) объектива требованиям фотографа, то есть обеспечения четкости объекта.

Звучит как довольно простая работа, но справиться с ней под силу далеко не всем, предъявляет высокие требования к скорости фокусировки и точности переключения. Без многолетнего накопления, необходимого для формирования мышечной памяти, трудно достичь уровня мастерства и трудно точно переключаться между различными фокусами.

Даже сейчас, когда технология автофокусировки камеры достигла большого прогресса, киноиндустрия по-прежнему неотделима, и она все еще полностью ручная, и у фотографа все еще есть такие «последователи».

Движение фокуса будет выделять персонажей, а также может выделять окружающую среду. Инстинкт человеческого глаза состоит в том, чтобы отслеживать четкий объект. Смена фокуса направляет внимание аудитории, чтобы переключиться вместе с фокусом, тем самым создавая повествование или атмосферу. стать фильмом, кусочком языка. Чжа Дао должен иметь право голоса в этом.

Если обычные люди хотят снимать подобный «кинематографическому» эффекту, если это не более поздний этап, достаточно полнокадровой камеры и объектива с большой диафрагмой, но с экономической и универсальной точки зрения это может быть отрицательная оценка.

В этом году «Режим киноэффекта» на всей серии iPhone 13 может стать новым выбором.

Режим видеоэффекта – это режим видеопортрета

Из всех телеканалов на iPhone 13 больше всего меня поразили «Whodunnit» и «Кто украл мой iPhone». Добавление режима кинематографического эффекта значительно улучшило сюжет всего фильма. Разумеется, актеры последнего – тоже большой.

Фактически, еще до того, как Apple выпустила iPhone 13 15 сентября, ходили соответствующие слухи о том, что Apple запустит функцию «видеопортрета», и тогда не думали, что она будет «полезной».

Но когда мы увидели коммерческую демонстрацию «Whodunnit» и после того, как у нас появилась серия iPhone 13, мы какое-то время пытались «воспроизвести», а затем постепенно поняли, что значение «режима киноэффекта» было сопоставимо со значением iPhone 7. Плюс. Портретный режим ».

Они не основаны на классической оптической технологии, но находят другой способ. Прежний «портретный режим» и текущий «режим киноэффекта» основаны на параллаксе нескольких линз, а не на LiDAR, что объясняет, почему iPhone 13 поддерживается всеми системами, а не только серией Pro.

Цель очевидна, то есть популяризировать как «портретную модель» года.

Это также основано на том, что эффект съемки в «режиме киноэффекта» iPhone 13 аналогичен, и распознавание объекта для имитации глубины резкости будет сосредоточено на лице, а при нескольких лицах большой приоритет будет данный.

Он не может идентифицировать предметы и животных, и для его переключения требуется ручное вмешательство. В многолюдной сцене iPhone 13 может распознавать несколько лиц одновременно, но он часто переключает фокус. В это время ему также необходимо вмешаться, чтобы выбрать человека, за которым вы хотите следовать, или непосредственно нажать и удерживать, чтобы заблокировать Это.

Кроме того, «режим киноэффектов» впервые был запущен Apple, и, естественно, существует множество ограничений. Во-первых, вырез недостаточно детализирован, края персонажей иногда «протыкаются», а самые высокие могут записывать только видео 1080p 30p, то же самое верно и для версии iPhone 13 Pro Max 1 ТБ.

Тем не менее, в соответствии с указанными выше ограничениями, «режим видеоэффектов» для всей серии iPhone 13 по-прежнему может учитывать кодирование Dolby Vision HDR, что также является выбором для Apple.

"Режим киноэффекта" на самом деле родился из любопытства.

В прошлом появление многих новых функций требовало понимания потребностей и получено на основе отзывов пользователей, но Apple, находясь на вершине пирамиды, делала продукты в большей степени в соответствии со своим собственным пониманием и ритмом.

В интервью Мэтью Панзарино, главному редактору TechCrunch, дизайнер человеко-машинного интерфейса Apple Джонни Манзари объяснил начало и конец модели эффекта фильма.

«Режим кинематографического эффекта» начинается не с самой функции, а только потому, что отдел дизайна интересуется процессом создания пленки, используя его в качестве отправной точки для изучения и изучения техник пленочной фотографии, чтобы приблизиться к преобразование реального фокуса и некоторые оптические характеристики.

В то же время Джон сказал, что разработка «режима киноэффекта» в чем-то похожа на функцию портретного фото со студийным световым эффектом, которая появилась на iPhone X.

Из портретных работ классического портретиста Энди Уорхола (Аведон Уорхол), художника барокко Рембрандта и скрупулезной китайской живописи изучите опыт и проанализируйте, а затем примените его в алгоритме произведения.

«Режим киноэффекта» – аналогичный процесс.Команда Apple сначала обсудила с видеооператорами мирового класса и посмотрела большое количество фильмов.

В процессе мы обнаружили некоторые неизменные тенденции в кинопроизводстве. Смена фокусов – это общий язык в киноиндустрии, и нам нужно точно понимать, как и когда они используются.

Поэтому Джон и члены команды работали в тесном сотрудничестве с оператором-постановщиком и первым помощником фотографа, чтобы понять механизм всего этого. Использование малой глубины резкости может привлечь внимание аудитории и помочь изображению истории.

Однако «зум» предназначен для профессионалов, и обычным людям сложно уловить точность.

Зная, что следящему за фокусом требуется много лет практики, чтобы справиться с ситуацией в реальном времени, когда фокусировка остается постоянной в соответствии с положением кинокамеры и объекта, Джон, команда дизайнеров и Apple считают, что этот "фильм" режим эффекта "вот-вот будет продан". Это будет очень конкурентоспособная функция.

Для этого, изучая Apple, «режим эффекта кино» разбит на две части: одна – «поиск фокуса», а другая – как плавная передача.

В конце концов, поиск фокуса настроен как «обнаружение взгляда», что на самом деле ближе к обнаружению лица, так что аудитория может сосредоточиться на движении главного героя и направить аудиторию, чтобы быстро понять историю.

Плавная передача – это функция, добавленная Джоном в результате длительного наблюдения за колесом управления фокусировкой, которым управляет ведомый. Опытный ведомый будет использовать роликовое управление для естественного и стабильного перемещения фокуса, а также будет изменять фокус в соответствии с фокусным расстоянием. длина линзы. Расстояние до объекта изменяется в реальном времени.

Apple провела много времени в «режиме видеоэффекта», пытаясь имитировать ручную работу этого ведомого, поэтому мы снимаем в «режиме видеоэффекта». При переключении между разными точками фокусировки это не механическое быстрое нажатие и нажатие. , но есть более очевидный процесс последующих действий.

Конечно, только что был выпущен «режим видеоэффектов», как и «портретный режим», его еще нужно оптимизировать.

Вы как будто видите, как Ланг Ланг играет на пианино так легко и свободно, но вы знаете, что невозможно использовать алгоритмы для достижения его мастерского уровня.

Герой приземления "Режима киноэффектов" A15

Поскольку это «угадывается» с помощью алгоритма, теоретически «режим эффекта фильма» может быть загружен на другие iPhone (например, iPhone 12) через OTA, но предварительный просмотр в реальном времени может быть принесен в жертву. Но с точки зрения Apple трудно децентрализовать новые функции, жертвуя некоторым опытом.

Таким образом, «режим киноэффекта» будет временно эксклюзивной функцией всей серии iPhone 13, а также станет порогом вычислительной мощности чипов A-серии, и он также может стать новым поколением iPhone » пользователей гвоздей ".

Кайанн Дранс, вице-президент по маркетингу iPhone, сказал в интервью, что создание видеороликов с имитацией глубины резкости более «сложно», чем портретные фотографии.

Видео должно перемещаться по мере движения объекта, требуется защита от сотрясения в реальном времени (цифровая плюс оптика), а также точное распознавание различных сцен, людей, животных и объектов. Поэтому для нейронных двигателей и машинного обучения требуется более высокое качество глубины Требуются данные, и они отображаются в режиме реального времени.

Да, и фокусировка в реальном времени, и поддержка кодирования Dolby Vision HDR. И за всем этим идет от A15, можно сказать, что молодой возраст взял на себя важную ответственность всей семьи.

По сравнению с процессором A15, в реальных тестах производительность графического процессора значительно улучшилась, он может принять совершенно новую архитектуру и накапливать еще одно ядро. Кроме того, вычислительная мощность движка нейронной сети A15 увеличена до 15,8 TOPS.

И эти аппаратные улучшения на этот раз могут быть связаны с улучшением видеофункций iPhone 13 серии. «Режим киноэффекта» содержит некоторые проблемы машинного обучения, которые отличаются от статических фотографий. Я считаю, что когда была разработана A15, команда разработчиков взаимодействия человека и компьютера Джона уже провела углубленный обмен мнениями по поводу разработки микросхем.

В тестовом видео TechCrunch они также обнаружили, что «режим киноэффекта» серии iPhone 13 использует избыточные датчики для прогнозирования объекта в процессе идентификации людей.

Как только затылок дочери Мэтью появился на экране, iPhone 13 в его руке сразу переключил фокус, как будто есть режиссер, который контролирует общую ситуацию в спектакле. Главный герой не появился на сцене, и освещение готовится заранее., и заставляет публику с нетерпением ждать ее появления.

Что касается этой детали «режима кино», дизайнер взаимодействия человека и компьютера в Apple, Джон сказал:

Наблюдая за производством фильма, мы обнаружили, что следящий за фокусом не ждет, пока главный герой переместит фокус, а имеет процесс предсказания. Мы также используем избыточные датчики для прогнозирования перемещения людей за пределы экрана с помощью машинного обучения. Когда они появляются на экране, фокус уже находится на них.

Джобс когда-то любил говорить, что Apple находится на стыке технологий и искусства.

До выпуска iPhone 13 серии «портретный режим» был больше похож на технический термин, и он казался холодным. Что касается «режима киноэффекта» и подачи ТВЦ, то он уже не холодный, а с определенной температурой. После глубокого понимания истории, лежащей в основе «режима киноэффекта», он принес немного «искусства съемки».

Для обычных людей "режим киноэффекта" может не иметь такого глубокого значения. Это больше похоже на отвертку для красного вина в швейцарском армейском ноже. Возможно, это не самый совершенный и трудосберегающий, но это инструмент, который можно использовать в экстренных случаях.

Фильмы показывают нам человеческие эмоции и истории. Если вы используете правильный язык, это будет передано. На данный момент мы много работали над тем, чтобы вашу историю жизни можно было записать и интерпретировать на вашем мобильном телефоне. Мне не терпится увидеть рассказы, написанные людьми, использующими «режим киноэффекта».

# Добро пожаловать, чтобы подписаться на официальную учетную запись Aifaner в WeChat: Aifaner (идентификатор WeChat: ifanr), более интересный контент будет предоставлен вам как можно скорее.

Ai Faner | Исходная ссылка · Посмотреть комментарии · Sina Weibo