Демистифицируя режим киноэффектов в iPhone 13, вот как его создала Apple

Я помню, как в молодости смотрел документальный фильм, в котором объяснялось разделение труда, стоящее за фильмом. И фотографов часто сопровождает сопровождающий, который как будто у каждого гольфиста будет кэдди, а у каждого участника ралли будет навигатор, который стал почти стандартом в киноиндустрии.

Повторитель фокусировки в основном только обеспечивает соответствие фокальной точки (фокальной плоскости) объектива требованиям фотографа, то есть обеспечения четкости объекта.

Звучит как довольно простая работа, но справиться с ней под силу далеко не всем, предъявляет высокие требования к скорости фокусировки и точности переключения. Без многолетнего накопления, необходимого для формирования мышечной памяти, трудно достичь уровня мастерства и трудно точно переключаться между различными фокусами.

Даже сейчас, когда технология автофокусировки камеры достигла большого прогресса, киноиндустрия по-прежнему неотделима, и она все еще полностью ручная, и у фотографа все еще есть такие «последователи».

Движение фокуса подчеркнет персонажа и окружающую среду. Инстинкт человеческого глаза состоит в том, чтобы отслеживать четкий объект, и изменение фокуса будет направлять внимание аудитории, чтобы переключиться вместе с фокусом, тем самым создавая повествование или атмосферу. Это стало фильм, кусочек языка. Чжа Дао должен иметь право голоса в этом.

Если обычные люди хотят снимать подобный «кинематографическому» эффекту, если это не более поздний этап, достаточно полнокадровой камеры и объектива с большой диафрагмой, но с экономической и универсальной точки зрения это может быть отрицательная оценка.

В этом году «Режим киноэффекта» на всей серии iPhone 13 может стать новым выбором.

Режим видеоэффекта – это режим видеопортрета

Из всех телеканалов на iPhone 13 больше всего меня поразили «Whodunnit» и «Кто украл мой iPhone». Добавление режима кинематографического эффекта значительно улучшило сюжет всего фильма. Разумеется, актеры последнего – тоже большой.

Фактически, еще до того, как Apple выпустила iPhone 13 15 сентября, ходили соответствующие слухи о том, что Apple запустит функцию «видеопортрета», и тогда не думали, что она будет «полезной».

Но когда мы увидели коммерческую демонстрацию «Whodunnit» и после того, как у нас появилась серия iPhone 13, мы какое-то время пытались «воспроизвести», а затем постепенно поняли, что значение «режим эффекта фильма» было сравнимо с «эффектом фильма». режим "на iPhone 7 Plus. Портретный режим".

Они не основаны на классической оптической технологии, но находят другой способ. Прежний «портретный режим» и текущий «режим киноэффекта» основаны на параллаксе нескольких линз, а не на LiDAR, что объясняет, почему iPhone 13 поддерживается всеми системами, а не только серией Pro.

Цель очевидна, то есть популяризировать как «портретную модель» года.

Это также основано на том, что эффект съемки в «режиме киноэффекта» iPhone 13 аналогичен, и распознавание объекта для имитации глубины резкости будет сосредоточено на лице, а при нескольких лицах большой приоритет будет данный.

Он не может идентифицировать предметы и животных, и для его переключения требуется ручное вмешательство. В многолюдной сцене iPhone 13 может распознавать несколько лиц одновременно, но он часто переключает фокус. В это время ему также необходимо вмешаться, чтобы выбрать человека, за которым вы хотите следовать, или непосредственно нажать и удерживать, чтобы заблокировать Это.

Кроме того, «режим киноэффектов» впервые был запущен Apple, и, естественно, существует множество ограничений. Во-первых, вырез недостаточно детализирован, края персонажей иногда «протыкаются», а самые высокие могут записывать только видео 1080p 30p, то же самое верно и для версии iPhone 13 Pro Max 1 ТБ.

Тем не менее, в соответствии с указанными выше ограничениями, «режим видеоэффектов» для всей серии iPhone 13 по-прежнему может учитывать кодирование Dolby Vision HDR, что также является выбором для Apple.

"Режим киноэффекта" на самом деле родился из любопытства.

В прошлом появление многих новых функций требовало понимания потребностей и получено на основе отзывов пользователей, но Apple, находясь на вершине пирамиды, делала продукты в большей степени в соответствии со своим собственным пониманием и ритмом.

В интервью Мэтью Панзарино, главному редактору TechCrunch, дизайнер человеко-машинного интерфейса Apple Джонни Манзари объяснил начало и конец модели эффекта фильма.

«Режим кинематографического эффекта» начинается не с самой функции, а только потому, что отдел дизайна интересуется процессом создания пленки, используя его в качестве отправной точки для изучения и изучения техник пленочной фотографии, чтобы приблизиться к преобразование реального фокуса и некоторые оптические характеристики.

В то же время Джон сказал, что разработка «режима киноэффекта» в чем-то похожа на функцию портретного фото со студийным световым эффектом, которая появилась на iPhone X.

Из портретных работ классического портретиста Энди Уорхола (Аведон Уорхол), художника барокко Рембрандта и скрупулезной китайской живописи изучите опыт и проанализируйте, а затем примените его в алгоритме произведения.

«Режим киноэффекта» – аналогичный процесс.Команда Apple сначала обсудила с видеооператорами мирового класса и посмотрела большое количество фильмов.

В процессе мы обнаружили некоторые неизменные тенденции в кинопроизводстве. Смена фокусов – это общий язык в киноиндустрии, и нам нужно точно понимать, как и когда они используются.

Поэтому Джон и члены команды работали в тесном сотрудничестве с оператором-постановщиком и первым помощником фотографа, чтобы понять механизм всего этого. Использование малой глубины резкости может привлечь внимание аудитории и помочь изображению истории.

Однако «зум» предназначен для профессионалов, и обычным людям сложно уловить точность.

Зная, что следящему за фокусом требуется много лет практики, чтобы справиться с ситуацией в реальном времени, когда фокусировка остается постоянной в соответствии с положением кинокамеры и объекта, Джон, команда дизайнеров и Apple считают, что этот "фильм" режим эффекта "вот-вот будет продан". Это будет очень конкурентоспособная функция.

Для этого, изучая Apple, «режим эффекта кино» разбит на две части: одна – «поиск фокуса», а другая – как плавная передача.

В конце концов, поиск фокуса настроен как «обнаружение взгляда», что на самом деле ближе к обнаружению лица, так что аудитория может сосредоточиться на движении главного героя и направить аудиторию, чтобы быстро понять историю.

Плавная передача – это функция, добавленная Джоном в результате длительного наблюдения за колесом управления фокусировкой, которым управляет ведомый. Опытный ведомый будет использовать роликовое управление для естественного и стабильного перемещения фокуса, а также будет изменять фокус в соответствии с фокусным расстоянием. длина линзы. Расстояние до объекта изменяется в реальном времени.

Apple провела много времени в «режиме видеоэффекта», пытаясь имитировать ручную работу этого ведомого, поэтому мы снимаем в «режиме видеоэффекта». При переключении между разными точками фокусировки это не механическое быстрое нажатие и нажатие. , но есть более очевидный процесс последующих действий.

Конечно, только что был выпущен «режим видеоэффектов», как и «портретный режим», его еще нужно оптимизировать.

Вы как будто видите, как Ланг Ланг играет на пианино так легко и свободно, но вы знаете, что невозможно использовать алгоритмы для достижения его мастерского уровня.

Герой приземления "Режима киноэффектов" A15

Поскольку это «угадывается» с помощью алгоритма, теоретически «режим эффекта фильма» может быть загружен на другие iPhone (например, iPhone 12) через OTA, но предварительный просмотр в реальном времени может быть принесен в жертву. Но с точки зрения Apple трудно децентрализовать новые функции, жертвуя некоторым опытом.

Таким образом, «режим киноэффекта» будет временно эксклюзивной функцией всей серии iPhone 13, а также станет порогом вычислительной мощности чипов A-серии, и он также может стать новым поколением iPhone » пользователей гвоздей ".

Кайанн Дранс, вице-президент по маркетингу iPhone, сказал в интервью, что создание видеороликов с имитацией глубины резкости более «сложно», чем портретные фотографии.

Видео должно перемещаться по мере движения объекта, требуется защита от сотрясения в реальном времени (цифровая плюс оптика), а также точное распознавание различных сцен, людей, животных и объектов. Поэтому для нейронных двигателей и машинного обучения требуется более высокое качество глубины Требуются данные, и они отображаются в режиме реального времени.

Да, и фокусировка в реальном времени, и поддержка кодирования Dolby Vision HDR. И за всем этим идет от A15, можно сказать, что молодой возраст взял на себя важную ответственность всей семьи.

По сравнению с процессором A15, в реальных тестах производительность графического процессора значительно улучшилась, он может принять совершенно новую архитектуру и накапливать еще одно ядро. Кроме того, вычислительная мощность движка нейронной сети A15 увеличена до 15,8 TOPS.

И эти аппаратные улучшения на этот раз могут быть связаны с улучшением видеофункций iPhone 13 серии. «Режим киноэффекта» содержит некоторые проблемы машинного обучения, которые отличаются от статических фотографий. Я считаю, что когда была разработана A15, команда разработчиков взаимодействия человека и компьютера Джона уже провела углубленный обмен мнениями по поводу разработки микросхем.

В тестовом видео TechCrunch они также обнаружили, что «режим киноэффекта» серии iPhone 13 использует избыточные датчики для прогнозирования объекта в процессе идентификации людей.

Как только затылок дочери Мэтью появился на экране, iPhone 13 в его руке сразу переключил фокус, как будто есть режиссер, который контролирует общую ситуацию в спектакле. Главный герой не появился на сцене, и освещение готовится заранее., и заставляет публику с нетерпением ждать ее появления.

Что касается этой детали «режима кино», дизайнер взаимодействия человека и компьютера в Apple, Джон сказал:

Наблюдая за производством фильма, мы обнаружили, что следящий за фокусом не ждет, пока главный герой переместит фокус, а имеет процесс предсказания. Мы также используем избыточные датчики для прогнозирования перемещения людей за пределы экрана с помощью машинного обучения. Когда они появляются на экране, фокус уже находится на них.

Джобс когда-то любил говорить, что Apple находится на стыке технологий и искусства.

До выпуска iPhone 13 серии «портретный режим» был больше похож на технический термин, и он казался холодным. Что касается «режима киноэффекта» и подачи ТВЦ, то он уже не холодный, а с определенной температурой. После глубокого понимания истории, лежащей в основе «режима киноэффектов», он принес немного «искусства съемки».

Для обычных людей "режим киноэффекта" может не иметь такого глубокого значения. Это больше похоже на отвертку для красного вина в швейцарском армейском ноже. Возможно, это не самый совершенный и трудосберегающий инструмент, но это инструмент которые можно использовать в экстренных случаях.

Фильмы показывают нам человеческие эмоции и истории. Если вы используете правильный язык, это будет передано. В настоящий момент мы много работали над тем, чтобы вашу историю жизни можно было записать и интерпретировать на вашем мобильном телефоне. Мне не терпится увидеть рассказы, написанные людьми, использующими «режим киноэффекта».

# Добро пожаловать, чтобы подписаться на официальный аккаунт Aifaner в WeChat: Aifaner (идентификатор WeChat: ifanr), более интересный контент будет предоставлен вам как можно скорее.

Ai Faner | Исходная ссылка · Посмотреть комментарии · Sina Weibo