Android претерпевает капитальный ремонт искусственного интеллекта. Вот как это выглядит

На Google I/O 2024 компания Google продемонстрировала множество новых улучшений, которые появятся в Android благодаря Gemini. С Gemini Android будет учитывать контекст на экране в различных сценариях, что значительно облегчит вашу жизнь. По крайней мере, по данным Google.

Circle to Search , который впервые был продемонстрирован во время мероприятия Samsung Galaxy Unpacked в начале этого года, получит некоторые новые улучшения. Теперь Circle to Search станет отличным новым помощником для студентов. Почему? Потому что он сможет помочь с домашними заданиями, например, по физике и математике. Вы можете просто обвести подсказку на экране, и вы получите пошаговые инструкции по ее решению.

Эта новая функция Circle to Search будет доступна сегодня. К концу года оно должно быть доступно более чем на 200 миллионах устройств.

Основное внимание Gemini уделяется тому, как он будет учитывать контекст того, что отображается на вашем экране. Например, Gemini может создать изображение, связанное с текстовым сообщением, и его можно добавить прямо в разговор. Вы также можете задать Gemini конкретные вопросы о видео, которое вы сейчас смотрите, или даже о длинных PDF-файлах, чтобы вам не приходилось прокручивать несколько страниц. Эта функция будет реализована на устройствах в течение следующих нескольких месяцев.

Мультимодальные возможности Gemini Nano будут доступны для Google Pixel позднее в этом году. Благодаря этой функции ваш смартфон сможет обрабатывать текст, а также понимать больше информации в определенных контекстах, таких как звуки, вздохи и разговорная речь.

Функция специальных возможностей, которая улучшается в Gemini, — это TalkBack. Эта функция предназначена для людей, страдающих слепотой или плохим зрением. TalkBack позволяет пользователям получать более подробные и четкие описания того, что происходит на изображении. Это обновление TalkBack от Gemini дополнит недостающую информацию, например подробности о том, что изображено на семейной фотографии, или даже о крое одежды при покупках в Интернете. Никакого подключения для передачи данных не требуется, поскольку Gemini Nano находится на устройстве.

Gemini также поможет предотвратить мошеннические звонки. Gemini Nano может предоставлять оповещения в режиме реального времени во время разговора, если он способен обнаружить шаблоны разговоров, которые обычно связаны с мошенничеством. Например, когда «представитель банка» просит вас перевести средства, произвести оплату подарочными картами или предоставить личную информацию.

Когда Gemini Nano обнаружит эти фразы, он выдаст вам на экране предупреждение, пока вы разговариваете по телефону, с небольшой информацией, например, о том, что банки никогда не будут просить вас перевести деньги.

Это только начало улучшений, которые появятся в Android 15 .