Флагман изображений 2023–2024 годов, почему вы его выбираете?
Мобильная платформа Snapdragon 8 третьего поколения была выпущена в октябре, что вызвало огромную цепную реакцию: флагманские телефоны Android были выпущены один за другим в четвертом квартале этого года, как с точки зрения цены, так и с точки зрения качества продукта, и конкуренция была очень высокой. чрезвычайно жестокий Даже когда будут выпущены некоторые мобильные телефоны, у вас возникнут вопросы: может ли эта машина приносить деньги?
▲ Модуль объектива Realme GT5 Pro
Например, выпущенный некоторое время назад сверхэкономичный флагманский мобильный телефон Realme GT5 Pro в своей ценовой категории свыше 3000 юаней предоставляет крайне искренние конфигурации:
- Третье поколение мобильной платформы Snapdragon 8 (Snapdragon 8 Gen3)
- Стартовая конфигурация 12+256ГБ
- Яркость до 4500 нит, не имеющий аналогов экран, разработанный совместно с BOE.
- Проводная зарядка 100 Вт + беспроводная зарядка 50 Вт.
- Телеобъектив потолочного уровня, состоящий из процессора Snapdragon 8 Gen3 + IMX890 + алгоритма ArcSoft.
Подождите, а почему Snapdragon 8 Gen3 появляется дважды?
SoC имеет не только процессор и графический процессор, но также интернет-провайдер и так далее.
Более десяти или двадцати лет назад, когда мы говорили о чипах, мы в основном делали упор на процессоры. Однако идея о том, что чипы примерно равны процессорам, давно устарела, поскольку большие чипы превратились в SoC (система на кристалле) с та же платформа, и существует множество типов небольших микросхем: те, которые отвечают за управление питанием, те, которые отвечают за отображение экрана и т. д.
Когда мы говорим о SoC, мы обычно сосредотачиваемся на процессоре и графическом процессоре, ведь они вносят наибольший вклад в тестирование игр.
Однако жизнь – это больше, чем еда и сон, а мобильные телефоны – это больше, чем игры для тестирования. Когда мы поднимаем телефон, открываем камеру, чтобы просмотреть вид, нажимаем кнопку спуска затвора, затем делаем фотографию, а затем загружаем ее в социальную сеть. В этом коротком процессе SoC представляет собой почти «сотрудничество нескольких отделов» с использованием множества модулей.
Внутри SoC есть много других частей, которые не участвуют в тестировании программного обеспечения, но имеют решающее значение.
В качестве примера возьмем недавно выпущенный Snapdragon 8 Gen3. Его состав довольно сложен. Помимо центрального процессора, отвечающего за общие вычисления, и графического процессора за графические вычисления, есть также NPU и механизм искусственного интеллекта, отвечающий в основном за вычисления искусственного интеллекта, модем, отвечающий за для подключения 5G, а также систему мобильного подключения FastConnect для Wi-Fi, Snapdragon Listen для аудио, комбинацию программного и аппаратного обеспечения для обеспечения безопасности, а также интернет-провайдера для обработки сигналов изображения и т. д.
ISP (процессор сигналов изображения) является одной из причин, по которой Snapdragon 8 Gen3 может неоднократно появляться в списке конфигурации Realme GT5 Pro.
▲ Принципиальная схема работы интернет-провайдера, изображение из CSDN
Иметь хороший объектив и хороший датчик изображения недостаточно.Интернет-провайдер также необходим для преобразования того, что видит объектив и то, что получает датчик, в то, что может отображать экран и что может видеть человеческий глаз.
Этот процесс достаточно сложен.Сначала свет проходит через объектив и попадает в светочувствительную область датчика изображения.Датчик подвергается фотоэлектрическому преобразованию для получения исходного изображения в формате Байера, то есть изображения с суффиксом .raw. Исходное изображение в формате Байера затем обрабатывается ISP, выводит данные изображения пространственной области в последующий блок видеоинтерфейса, а затем передает их на экран для отображения. Роль интернет-провайдера заключается в оптимизации, улучшении и обработке изображений и видеосигналов, снятых с камеры телефона, а также в управлении интерфейсом датчика и последующей обработке данных изображения.
Этот процесс подобен преобразователю, соединяющему систему формирования изображения с системой отображения, но интернет-провайдер выполняет большую работу, включая, помимо прочего, улучшение качества изображения, такое как улучшение цвета, регулировка баланса белого и обработка шумоподавления, что особенно важно. важно при съемке ночных сцен. Крайне важно, что без мощного интернет-провайдера для уменьшения шума и частиц ночные сцены современных флагманских телефонов будут очень размытыми; кроме того, он включает в себя многокадровый синтез после съемки HDR, замедленную съемку, панорамный режим шитье и т.д.
Кроме того, низкий порог для мобильной фотографии также зависит от вклада интернет-провайдера.Многие люди могут быть не в состоянии сделать четкую фотографию, когда они приобретут камеру среднего формата Leica, потому что фокус, диафрагму и т. д. необходимо регулировать вручную. . На мобильных телефонах интернет-провайдер использует вычисления в реальном времени вместе с лазерной фокусировкой, датчиками освещенности и другими компонентами для реализации таких функций, как автофокусировка, автоэкспозиция, автоматическая диафрагма и автоматический баланс белого, помогая пользователям получать четкие снимки. фотографии в момент включения камеры телефона.
Когда мы критикуем некоторые камеры мобильных телефонов за медленную фокусировку, плохой баланс белого, передержку в автоматическом HDR и некачественное качество изображения ночной сцены, проблема, скорее всего, кроется в слабом интернет-провайдере.
Основной вклад в появление чипов серии Snapdragon 8 и изображений флагманских телефонов, конечно же, внесли интернет-провайдеры, скрывающиеся за ними.
Таким образом, цель приведенного в начале примера Realme GT5 Pro именно здесь, поскольку комбинация датчика изображения Sony IMX890 + Snapdragon 8 Gen3 + алгоритма ArcSoft имеет типичное значение.Мощное оборудование для обработки изображений с мощными возможностями интернет-провайдера в сочетании с отличными алгоритмами может Основа для получения хороших изображений.
Базовая производительность интернет-провайдера этого поколения Snapdragon 8 Gen3 еще выше.Фактически, Snapdragon 8 Gen3 имеет три интернет-провайдера, поддерживающих три камеры для одновременной съемки HDR-видео.Глубина цвета достигает 18 бит, и максимальная поддержка составляет 200 миллионов пикселей, камера и запись видео 8K 30 кадров в секунду или 4K 120 кадров в секунду, замедленная видеозапись поддерживает 720p 960 кадров в секунду…..
Это означает, что интернет-провайдер Snapdragon 8 Gen3 обладает очень отличными возможностями обработки данных.
Но это еще не все возможности Snapdragon 8 Gen3 по обработке изображений.
Искусственный интеллект — это магия технологий, Snapdragon Sight — заклинание, которое делает фотографии лучше
Если бы 5 лет назад производитель заявил, что его фотографии уровня зеркальных или студийных, его раскритиковали бы профессионалы и массовые игроки за преувеличение своих претензий.
Но в 2023 году многие производители начали продвигать портреты уровня зеркальных фотоаппаратов и портреты студийного уровня.
Именно здесь проявляется мощь вычислительной фотографии, благодаря которой движущиеся изображения выглядят как профессиональные изображения задних фонарей в поворотах.Недостаточно широкая диафрагма? Компьютерная фотография может имитировать естественные эффекты размытия. Фокусное расстояние недостаточно велико? Используя перископический зум, цифровой зум и просчитывая детали оптимизации фотографии, вы также можете получить хорошие супертелеобъективные фотографии.
Но в 2023 году, волшебном году ИИ, соединение изображений и ИИ, естественно, станет естественным.
Snapdragon Sight Развитие технологии обработки изображений Snapdragon стало более тесно связано с искусственным интеллектом с выпуском Snapdragon 8 Gen3. Выдающаяся производительность ISP Snapdragon 8 Gen3 и дальнейшее повышение вычислительной мощности искусственного интеллекта делают технологию обработки изображений Snapdragon Sight еще более мощной, становясь технической базой для многих флагманов обработки изображений.
Например, технология DCG (Dual Conversion Gain), поддерживаемая Snapdragon Sight, — это технология, которая может обеспечить лучшее качество изображения и более быструю обработку изображений, а также может использоваться для изображений HDR. По сути, это тоже технология многокадрового синтеза, но многокадровые изображения DCG генерируются одновременно, а не до и после традиционного многокадрового синтеза.
Есть также такие функции, как режим ночного видения и поддержка формата Dolby, которые, по сути, являются результатом улучшения производительности интернет-провайдера.
Однако такие технологии, как расширение изображения и стирание объектов, также требуют поддержки вычислительных модулей искусственного интеллекта, таких как NPU.
Раньше мы могли подумать, что эти магические технологии искусственного интеллекта не относятся к категории изображений, но в определенной степени эти технологии, которые когда-то требовали сложных операций с программным обеспечением, таким как PhoneShop, теперь стали простыми и легкодоступными.
А функция стирания объектов ограничена изображениями, но теперь Snapdragon 8 Gen3 начал поддерживать стирание объектов в видео, и за этим все еще работает ключевое слово «вычислительная мощность».
В то же время, при поддержке искусственного интеллекта, интернет-провайдер может превратиться в когнитивного интернет-провайдера, который сможет использовать механизм искусственного интеллекта Qualcomm для выполнения семантической сегментации в реальном времени при съемке фотографий и видео, а также идентификации различных элементов изображения, таких как здания, лодки, реки, деревья, человеческое лицо, глаза, волосы, кожа и т. д. Во времена Snapdragon 8 Gen2 Cognitive ISP мог идентифицировать 8 семантических слоев на изображениях. В то время он мог даже поддерживать возможность удаления отражения очков. Теперь, с Snapdragon 8 Gen3, количество семантических слоев, которые Возможность распознавания в режиме реального времени повышена. Повышен до уровня 12.
Чем больше уровней распознавания, тем яснее понимание изображения и тем выше вероятность его дальнейшего улучшения.
Для потребителей технологии обработки изображений в 2023 году будут находиться на ускоренном этапе благодаря поддержке Snapdragon 8 Gen3: делать хорошие фотографии и хорошие видео становится проще, чем когда-либо, и в то же время эти фотографии и видео под магией искусственного интеллекта и поддерживаются технологией обработки изображений Snapdragon Sight, имеют больше возможностей и могут быть расширены, удалены и повторно отредактированы.
Когда мы открываем страницы многих флагманских мобильных телефонов с изображениями и прокручиваем раздел с изображениями, мы постоянно чувствуем, что «алгоритмы» повсюду, поддерживая различные «движки», такие как ISP и NPU.
Фактически, если вы сравните техническую подготовку технологии обработки изображений Snapdragon Sight Snapdragon, вы обнаружите, что на данном этапе она фактически оставляет много избыточности для фотографии на мобильный телефон. Например, еще не полностью реализованы такие функции, как съемка видео 4K со скоростью 120 кадров в секунду, одновременная съемка 3 камерами и т. д. Причина в том, что, конечно, производители вышестоящих устройств должны опережать производителей терминалов и предоставлять больший потенциал для исследования, а не чем стать ограничением.
С нетерпением ждем выхода флагманов обработки изображений в 2024 году: серии OPPO Find X7, vivo X100 Pro+, Xiaomi 14 Ultra, Samsung Galaxy S24 Ultra и т. д., более мощные и профессиональные флагманы обработки изображений будут дополнительно использовать Snapdragon 8 Gen3 и Snapdragon Sight. Техническая мощь Snapdragon. .
К тому времени мы лучше поймем ценность этого ядра.
# Добро пожаловать на официальную общедоступную учетную запись aifaner в WeChat: aifaner (идентификатор WeChat: ifanr). Более интересный контент будет предоставлен вам как можно скорее.
Ай Фанер | Исходная ссылка · Посмотреть комментарии · Sina Weibo