iOS 18 положила конец дебатам об iPhone и Android

Обновлен интерфейс активации Siri.
Яблоко

«Мне просто нужно увидеть что-нибудь особенно полезное, что может сделать ИИ», — сказал мне ветеран технической журналистики перед мероприятием Apple WWDC 2024 . В значительной степени я согласен с этим мнением, хотя я использовал инструменты искусственного интеллекта потребительского уровня во всех сценариях, которые позволял мой выбор оборудования. К моменту завершения мероприятия Apple у меня возникло стойкое ощущение, что Apple, возможно, только что представила наиболее практичную дозу искусственного интеллекта в смартфоне.

Мы вступили в эпоху Apple Intelligence на iPhone. Сначала я сообщу о плохих новостях: вся тарелка искусственного интеллекта подается только на новейших и лучших iPhone «Pro». Их нет даже для iPhone 15 или iPhone 15 Plus. Видимо виноват кремний и встроенный NPU, а может быть все дело в ограничениях по памяти. Аналогичные ограничения действуют и для iPad, которым необходим процессор как минимум М-класса.

Подход Google не слишком отличается. Компания оставила Gemini Nano на устройстве ограниченным телефонами серии Pixel 8, в то время как Samsung также начала гонку с функциями Galaxy AI, эксклюзивными для телефонов серии Galaxy S24. В последующие недели произошли некоторые корректировки курса.

Но на этом сходство заканчивается. Apple Intelligence — пакет Apple для функций искусственного интеллекта iPhone — на несколько лиг опережает достижения искусственного интеллекта, которые мы видели на телефонах Android. Даже на столь раннем этапе лидерство Apple в этой гонке даже не близко.

Что делает Apple Intelligence особенным

Siri предлагает рекомендации пользователям.
«Привет, Siri, теперь ты моя техническая поддержка по всем этим сложным вопросам со смартфоном!» Яблоко

К чести Apple, она заявляет, что хочет выполнять большую часть обработки ИИ на устройстве, а для этой задачи нужен мощный ускоритель ИИ и кремний. Почему A16 внутри iPhone 15 не подойдет? Мы не знаем, несмотря на то, что он уверенно превосходит тензорный кремний Pixel 8, а лучшие процессоры Qualcomm в Galaxy S24 также изо всех сил пытаются его догнать.

Но, эй, я бы в любой момент позаботился о безопасности своих личных данных, а не доверял бы оборудованию, которое перекладывает сложные задачи ИИ на облачный сервер, которым управляет другая компания. Но почему ИИ в iOS 18 превосходит то, чего достигли телефоны Android с собственной причудливой лицензией Gemini Nano и взаимодействием с такими игроками, как Perplexity? Как измерить функциональную эффективность?

Ну, просто проверьте, насколько глубоко ИИ работает со встроенной системой и приложениями, а не действует как одинокий воин со своим фиксированным набором границ. Именно здесь Apple Intelligence значительно опережает конкурентов. Он встроен на системном уровне в такие приложения, как Mail, Notes, Pages и даже сторонние приложения.

Например, инструменты письма Apple позволят вам изменить стиль текста на экране, обобщить его, превратить в маркеры и многое другое. Раньше вам нужно было использовать специальное приложение или инструмент, такой как Paragraph AI, для той же задачи. Он также будет корректировать и вносить соответствующие предложения по редактированию по мере продвижения вашей работы.

Трюки ИИ, которые действительно полезны

Умный ответ с помощью Apple Intelligence
Яблоко

ИИ должен приносить практическую пользу, и нет лучшего способа тренировать эти мускулы, чем утилитарные приложения, такие как электронная почта. В приложении «Почта» искусственный интеллект Apple не только будет показывать вверху сообщения с высоким приоритетом. Он также будет генерировать обобщенные версии электронных писем, так что вам не придется терять рассудок, читая каждое из них в длинной цепочке.

Apple проявила аналогичную любезность к уведомлениям. Мои iPhone вызвали у меня настоящую тревогу по поводу уведомлений, и этот длинный просмотр карточек на экране блокировки, конечно, не помогает. В iOS 18 встроенный искусственный интеллект не только будет определять приоритетность уведомлений, но и суммировать их.

Аналогичная возможность распространяется и на электронную почту. Кажется, инженеры Apple были очарованы очень хорошим почтовым приложением с искусственным интеллектом под названием Shortwave . В любом случае, я воспользуюсь удобством. По теме резюмирования у нас есть транскрипция.

Обобщение уведомлений и электронных писем на iPhone с помощью Apple Intelligence.
Яблоко

Благодаря искусственному интеллекту ваш iPhone наконец-то позволит вам записывать и расшифровывать звонки. Аудиоклипы, добавленные к заметкам, также автоматически расшифровываются с дополнительной возможностью резюмирования. Для журналиста, которому каждый день приходится носить с собой смартфон Pixel исключительно ради фантастического приложения Recorder, чтобы проводить интервью и расшифровывать их, новые функции Apple по транскрипции и обобщению являются не чем иным, как настоящей находкой.

Apple также переводит некоторые волшебства искусственного интеллекта в режим фокусировки. Теперь ИИ будет отображать важные оповещения на основе их содержания, чтобы вы не пропустили что-то срочное. Это еще одно продуманное дополнение. Я потерял счет времени, сколько раз пропустил сообщения от Slack или Teams, потому что включил режим фокусировки для рабочего времени. А поскольку оно синхронизируется с оборудованием Apple, вы не сможете случайно наткнуться на одно из этих уведомлений о сообщениях.

Google пошел, чтобы Apple могла работать

Запись и обобщение разговоров на iPhone.
Яблоко

Еще одна полезная функция — «Умный ответ» в приложении «Почта». Мне понравилась эта возможность в Gmail, но Apple, похоже, пошла глубже. ИИ не просто предложит развернутый ответ на электронное письмо. Вместо этого он определит все вопросы, заданные в электронном письме, и предложит соответствующие ответы на каждый из них. Довольно круто и удобно, я бы сказал.

Людям, которые делают много фотографий и делятся ими, приложение «Фото» позволит искать медиафайлы с помощью текстовых подсказок, например «найди мне фотографии моего кота в фиолетовой кепке». Есть также изящный трюк, который удалит ненужные элементы с ваших изображений и выполнит интеллектуальную заливку пикселей. Да, он вдохновлен Google Photos, но также и многие функции Apple Intelligence, анонсированные на WWDC.

Самая мощная и значимая функция iOS 18, основанная на искусственном интеллекте, заключается в том, что Siri теперь может общаться с другими приложениями, установленными на вашем телефоне, и выполнять необходимые действия. «Осознание вашего личного контекста», — говорит Apple. Например, вы можете попросить: «Найдите мне кофейни, рекомендованные Джо», и Siri найдет разговоры с Джо и найдет соответствующую информацию. Демонстрации Apple показывают, как Siri копается в сообщениях, почте и файловом менеджере.

Это функции искусственного интеллекта, которых мы ждали

Оповещение о приоритете в режиме фокусировки.
Яблоко

Примечательно, что благодаря платформе App Intents разработчики могут интегрировать Siri в свои приложения для выполнения широкого спектра задач. Image Playgrounds и Write Tools (на базе ChatGPT) также будут использовать эту интеграцию. Это выводит утилиту Siri на совершенно новый уровень: она может выполнять задачи практически в любом приложении с помощью голосовой команды, при этом пользователям даже не придется прикасаться или касаться экрана своего телефона.

Виртуальные помощники всегда должны были облегчить наше взаимодействие по телефону, избавить его от рутинной работы и действовать как умные цифровые компаньоны, которые не будут разочаровывать нас на каждом шагу. Более глубокая интеграция приложений и понимание контекста — это шаг в правильном направлении. Просто удивительно видеть, что с первой попытки Apple удалось превзойти первых лидеров вроде Google и успешно внедрить искусственный интеллект на вашем телефоне.

Но согласны ли вы предоставить Siri доступ к вашим сквозным зашифрованным чатам в WhatsApp ради удобства? Какие трюки Apple Intelligence могут работать в автономном режиме? Соблюдает ли Apple 100% этичность при создании изображений с точки зрения авторских прав? Почему сверхмощные iPhone были исключены из доступа к Apple Intelligence? Каковы мелкие детали партнерства Apple с OpenAI и внедрения ChatGPT в iOS до такой степени, что он, по сути, существует как помощник Siri?

Есть много вопросов, на которые еще предстоит ответить. Я подожду, пока Apple Intelligence выйдет на тестирование, но на данный момент это кажется лучшим воплощением идеи «ИИ на телефоне» — и посрамило конкурирующие предложения Android.