Эта новая функция Google Lens выглядит так, как будто она взята из научно-фантастического фильма.

Google представила AR Translate как часть трех обновлений для Google Lens , которые нацелены на дальнейшее развитие перевода изображений в будущем. В среду компания провела демонстрацию на конференции Google Search On 2022, чтобы показать, что AR Translate может использовать ИИ, чтобы изображения на иностранном языке выглядели более естественно после перевода текста на другой язык.

В настоящее время любой текст, преобразованный на другом языке, использует цветные блоки для маскировки битов фонового изображения. AR Translate лучше сохраняет изображение, удаляя блоки и просто заменяя текст местами, чтобы переведенное изображение выглядело так, как если бы оно было исходной фотографией.

То, что вам нравится в Translating with Lens, теперь стало еще лучше.

Благодаря значительным достижениям в области искусственного интеллекта переведенный текст выглядит органично интегрированным, как если бы он был частью исходного изображения. Превращение текста… в контекст! #ПоискВ pic.twitter.com/N8YySv87z1

– Google (@Google) 28 сентября 2022 г.

Google заявил, что оптимизировал модели машинного обучения, чтобы AR Translate мог работать за 100 миллисекунд. Скорость перевода стала возможной благодаря той же технологии, которую Google использует для Magic Eraser , независимо от того, пытаетесь ли вы перевести снимок экрана или постер с помощью объектива камеры в реальном времени.

AR Translate — это впечатляющее нововведение, которое выглядит так, как будто оно взято прямо из научно-фантастического фильма. Люди смогут не только переводить плакаты, которые они увидят в музее, зоопарке или другом туристическом объекте, когда путешествуют по разным странам, но однажды они также смогут переводить уличные знаки и вывески витрин быстрее, чем мгновение. глаз. Хотя мы не уверены, сможет ли живая объективная камера переводить знаки, на которых текст выпуклый, как на строительных знаках. Тем не менее, впечатляет то, что Google продолжает улучшать одну из своих самых впечатляющих (и полезных) функций.

AR Translate появится в приложении Google позже в этом году.