Функция «Смотри и говори» означает, что вам не нужно говорить «Привет, Google».

Сколько раз в день вам приходится говорить «Привет, Google»? Во время мероприятия Google I/O компания анонсировала две новые функции: «Смотри и говори» и расширенные «Быстрые фразы».

Look and Talk позволяет смотреть прямо на устройство Nest и задавать ему вопросы, не используя ключевое слово. Вы можете подписаться на эту функцию, и как только вы это сделаете, вся обработка будет выполняться на устройстве. Это означает, что Google — или кто-либо другой, если уж на то пошло — не увидит ваше лицо и не услышит ваших команд.

Так как именно это работает? Google использует шесть разных моделей машинного обучения, чтобы отличить мимолетный взгляд от продолжительного зрительного контакта. Если вы задаете несколько вопросов, это отличное решение. Пример, который дал Google, был: «Покажи мне пляжи возле Санта-Крус» с последующими вопросами о конкретных ответах.

Следующим идут «Быстрые фразы» — список вопросов, на которые Google может ответить сразу же, без горячих слов. К ним относятся общие команды, такие как установка таймера, приостановка музыки и многое другое.

В основе всех этих обновлений лежат новые речевые модели, которые работают на самом устройстве, чтобы сделать его быстрее. Более совершенные нейронные сети могут лучше понимать человеческую речь, даже если она прерывистая и прерывистая. В этом примере Google Assistant слегка подтолкнул говорящего, чтобы он закончил свой вопрос, но смог определить, что хотел говорящий, даже при неполной информации. Google заявляет, что Tensor Chip является движущей силой этого обновления, обеспечивая необходимую вычислительную мощность для обработки речи на устройстве.

Дополнительные новости о Google I/O 2022 см. здесь.