Приложение Gemini наконец-то получило всемирно понятное обновление Project Astra
На MWC 2025 компания Google подтвердила, что ее экспериментальный помощник Project Astra получит широкое распространение в марте. Кажется, эта функция начала доходить до пользователей, хотя и поэтапно, начиная со смартфонов Android.
На Reddit один пользователь поделился демонстрационным видео , в котором показана новая опция «Поделиться экраном в прямом эфире» при вызове Gemini Assistant. Более того, интерфейс Gemini Live также получил две новые опции для живого видео и совместного использования экрана.
Google также подтвердил The Verge , что вышеупомянутые функции сейчас находятся на стадии развертывания. До сих пор Gemini была способна только к контекстуальной осведомленности на экране благодаря функции «Спросить об экране».
Проект Астра — будущее Gemini AI
Если вы не знакомы, Project Astra — это самая футуристическая версия ИИ, который может понимать текст, аудио, изображения, видео и прямую трансляцию с камеры в режиме реального времени. Директор по исследованиям Google Deepmind Грег Уэйн сравнил его с «маленьким попугаем на вашем плече, который тусуется с вами и говорит с вами о мире».
Когда вы вызываете Gemini и включаете опцию «Поделиться экраном в прямом эфире» в любом приложении, он будет анализировать содержимое экрана и отвечать на запросы на его основе. Например, пользователи могут попросить его описать текущую активность, происходящую в приложении, разбить или суммировать любую статью, которую они читали, или поговорить с ними о сцене во время воспроизведения видео.
Более впечатляющая возможность — это система понимания мира. Когда вы переключаетесь в режим Live для Gemini, теперь отображается опция видеопотока, которая открывает камеру. В этом режиме, если вы наведете камеру на любой объект, Близнецы смогут видеть, понимать и отвечать на вопросы в зависимости от того, что они видят.
Навести камеру на отрывок из книги, попросить Близнецов рассказать больше о памятнике, получить совет по декору или решить задачи, написанные на доске или в книге — все это можно сделать с помощью обновления Project Astra от Gemini Live. Оно не сильно отличается от Apple Visual Intelligence на iPhone или от приложения HuggingSnap с открытым исходным кодом, которое обещает ИИ, понимающий мир в автономном режиме .
Компания Digital Trends получила демо-версию Project Astra на MWC в начале этого года, впервые опробовав значительно обновленный опыт работы с искусственным интеллектом на смартфонах. Стоит отметить, что обновление Project Astra от Gemini Live будет доступно только клиентам, которые платят за подписку Gemini Advanced.
Похоже, что масштаб обновления Project Astra на данный момент не слишком широк. У меня есть подписка Gemini Advanced через пакет Google One AI Premium, но я пока не вижу ее ни на одном из моих телефонов Pixel с последней стабильной версией Android 15 или бета-версией Android 16.