Саморазработанный импульсный чип на складном экране Mi MIX – это будущее мобильной фотографии?

«Процессорные чипы – это высшая точка развития технологий в индустрии мобильных телефонов, и они находятся на вершине пирамиды. Если вы хотите стать великой компанией в этой отрасли, вы должны обладать автономией в основных технологиях, чтобы компания могла идти дальше. далеко."

Это была речь Лэй Цзюня на пресс-конференции, когда Xiaomi объявила о выходе на рынок чипов и выпустила первый серийный чип Surge S1.

Однако после стремительного роста S1, чип S2 было сложно производить, а саморазработанный импульсный чип Xiaomi постепенно стал сдержанным и исчез из поля зрения общественности. Только в августе прошлого года Лэй Цзюнь сообщил, что импульсный чип все еще находится в стадии разработки. Я считаю, что на данный момент Xiaomi MIX FOLD уже завершила пробное производство и приступила к массовому производству, как и встроенный чип «Surge C1».

По сравнению с Surging S1 и dystocia S2, Surging C1 – это всего лишь интернет-провайдер. Его функции намного проще, чем у SoC, а конструкция чипа не так сложна. Он больше подходит для «всплеска» нового старта.

В то же время Surging C1 собственной разработки является независимым ISP (обработчиком изображений) внутри MIX FOLD, и его можно рассматривать как единственный продукт, оснащенный независимым ISP в текущей флагманской машине.

При планировании линейки продуктов MIX FOLD не является массовым продуктом, как серия Mi 11. Таким образом, быстроразвивающийся чип C1 или независимый интернет-провайдер в мобильном телефоне еще не стал массовым. -масштабная попытка.

Это не исключает появления независимых интернет-провайдеров на флагманах Xiaomi следующего поколения (во второй половине года?) Или может вызвать «эффект бабочки», который станет стандартной функцией отечественных флагманов и станет трендом в мобильной визуализации. Это возможно?

Какую роль в создании изображений играет интернет-провайдер?

Короче говоря, за обработку изображений, собранных датчиком, отвечает провайдер.

Независимо от смартфонов, беззеркальных фотоаппаратов и зеркальных фотокамер, интернет-провайдеры играют практически одинаковые роли, и процессы аналогичны. Все они выполняют операции преобразования Байера, демозаики, шумоподавления и повышения резкости на «необработанных данных», собранных датчиком изображения. . Но со стороны смартфонов ISP также будет включать процесс «вычислительной фотографии» с другими алгоритмами и различными настройками, и в конечном итоге производить разные фотографии.

Конфигурация SoC с независимым провайдером фактически аналогична профессиональной беззеркальной камере. В качестве примера возьмем процессор обработки изображений Sony BIONZ X (серия α7 royal). Он содержит микросхемы SoC и ISP и не упаковывается вместе. Преимущество состоит в том, что Sony может увеличить количество микросхем ISP в соответствии с требованиями к производительности CMOS (α7RIII BIONZ). .X оснащен двойным ISP), недостатком является невысокая степень интеграции.

До MIX FOLD интернет-провайдеры большинства смартфонов были упакованы в SoC, и каждый год они обновлялись с помощью итераций обновления SoC.

Например, теперь флагманский чип Qualcomm, Snapdragon 888, имеет три встроенных чипа ISP с пропускной способностью обработки пикселей 2,7 миллиарда пикселей в секунду и может одновременно снимать три 28-мегапиксельных фотографии или три видео 4K HDR. По сравнению с предыдущим поколением Snapdragon 865 наблюдается улучшение на 35%.

MediaTek в другом лагере также значительно улучшил производительность встроенного интернет-провайдера в последней версии Dimensity 1200 SoC. По сравнению с 80 миллионами пикселей предыдущего поколения Dimensity 1000, он был повышен до уровня поддержки 200 миллионов пикселей в одном устройстве. go, а также добавлен ряд новых функций, основанных на алгоритмах искусственного интеллекта.

Вычислительная мощность ISP должна не только соответствовать производительности сенсора, но и быть связана с алгоритмом «вычислительной фотографии». Он будет напрямую определять тенденцию смартфона к изображению, будь то насыщенный цвет или нет, сколько бликов сохраняются, и выбор темных частей. Сколько и сколько информации о градиентах сохраняется в алгоритме HDR и т. д.

Из этого видно, что, когда производители микросхем разрабатывают SoC следующего поколения, улучшение производительности интернет-провайдеров будет основным направлением, которое тесно связано с важностью визуализации мобильных телефонов.

С точки зрения возможности управления одними только датчиками с высоким разрешением, встроенная производительность ISP нынешней стандартной SoC по-прежнему остается высокой, и ее достаточно для обработки текущих фотографий с максимальным разрешением в 100 миллионов пикселей за один раз.

Кроме того, сверхвысокопиксельный сенсор, о котором мы говорим, теперь работает в режимах «четыре в одном» и «девять в одном». При преобразовании фотография на самом деле имеет 20 миллионов пикселей. Даже если вы включите Другой процесс расчета, провайдер SoC по-прежнему не будет тянуть вниз «вычислительную фотографию».

Зачем нужен независимый интернет-провайдер?

Поскольку у провайдера в SoC есть зрелая технология, зрелые алгоритмы и отличная производительность, почему он оснащен независимым чипом ISP?

Для Xiaomi этот «маленький чип» можно рассматривать как новый старт. Поскольку запуска независимой SoC недостаточно, лучше переложить бремя, начать с «малого», начать с интернет-провайдера и медленно накопить опыт, и в результате длительных обсуждений, это хороший выбор. Смело скажите, что многие «маленькие микросхемы», такие как ISP, могут быть использованы в последующем автомобилестроении, что также считается продвинутой схемой.

Как упоминалось выше, ISP предназначен не только для «вычислительной фотографии», но его основная функция заключается в обработке необработанных данных, собранных датчиком. Этот процесс обработки ничем не отличается от процесса традиционной камеры. На пресс-конференции для функции быстроразвивающегося интернет-провайдера C1, упомянутые Xiaomi, в основном были связаны с обработкой 3A, то есть фокусировкой (AF), алгоритмом баланса белого (AWB) и стратегией экспозиции (AE). Управляемость лучше.

Фактически, обработка 3A – это лишь «верхушка айсберга» для данных, собранных датчиком. Строго говоря, интернет-провайдер будет обрабатывать более десятка элементов необработанных данных, а обработку 3A также можно разделить на «в широком смысле» и «в узком смысле».

В узком смысле, это то, что Xiaomi заявила на пресс-конференции. В широком смысле AF может быть расширен до автоматической фокусировки, управления двигателем автофокусировки и выбора точки автофокусировки. AE включает в себя больше, авто ISO, автоматические фильтры ND, автоматические жалюзи и т. д. AWB также будет включать в себя различные изменения оттенка.

В общем, эффект окончательной обработки изображений в основном вызван различными стратегиями и компромиссами на каждом этапе ISP.

Оснащение независимым интернет-провайдером в основном предназначено для улучшения конечного эффекта изображения.В последние годы Xiaomi продолжала прилагать усилия к изображениям и накопила стратегию обработки изображений ISP. В сочетании с независимым интернет-провайдером Surging C1 я все еще хочу глубже понять процесс и стратегию интернет-провайдера в обработке необработанных данных, и это также можно рассматривать как прокладку пути для последующих мобильных телефонов Xiaomi, чтобы продолжать улучшать качество изображения.

Станут ли независимые интернет-провайдеры тенденцией «движущихся изображений» в будущем?

В Mi 11 Ultra используется подошва размером около одного дюйма. Если в последующем не будет «оптического прорыва», это почти физический предел. И текущее количество пикселей CMOS также находится в состоянии «гонки вооружений», скоро мы должны увидеть, как смартфоны выйдут на порог в 200 миллионов пикселей.

Постоянное улучшение качества изображения уже является основной тенденцией в индустрии смартфонов, и оно также привело к «гомогенизации». Чтобы создать различный имидж, многие производители вкладывают ресурсы в разработку различных технологий, а некоторые даже сотрудничают с традиционными производителями изображений, чтобы улучшить свой имидж.

Но для движущихся изображений, пока действует железный закон физической оптики, на конечное изображение влияют традиционные аспекты качества сенсора, производительности ISP и качества линз.

С тех пор производители мобильных телефонов будут настраивать CMOS (сенсор), чтобы получить лучшую основу изображения, усовершенствовать алгоритм, чтобы сделать окончательное изображение более естественным, и усердно работать над совмещением линз, чтобы адаптироваться к большему количеству сцен.

Что касается независимых интернет-провайдеров, то они хотят стать серьезным трендом, аналогичным вышеупомянутой ситуации. Глядя на это сейчас, еще рано. Если быть точным, это должно быть «общим направлением» в будущем.

С одной стороны, ISP, встроенный в текущую SoC, не будет помехой, и это не самая короткая деревянная доска на корпусе движущегося изображения. С другой стороны, у независимого интернет-провайдера есть не низкий порог. В настоящее время производители микросхем, такие как Qualcomm и MediaTek, еще не запустили независимых интернет-провайдеров для смартфонов. Если они хотят иметь независимых интернет-провайдеров, им, возможно, придется полагаться на собственное производство. В настоящее время не так много производителей мобильных телефонов могут производить собственные чипы.

Более того, нынешние независимые интернет-провайдеры еще не продемонстрировали своих достоинств.После знакомства с оригинальными словами MIX FOLD Чжицзянь камеры MIX FOLD не стали исключением. Другими словами, будь то «жидкая линза» или независимый интернет-провайдер, это больше похоже на выкладывание продуктов будущего, накопление небольших потоков в реку.

# Добро пожаловать, чтобы подписаться на официальный аккаунт Aifaner в WeChat: Aifaner (идентификатор WeChat: ifanr), более интересный контент будет предоставлен вам как можно скорее.

Ai Faner | Исходная ссылка · Посмотреть комментарии · Sina Weibo