Разбейте пространственную стену! Технология 3D-голографических звонков Google вступила в стадию испытаний, и видеозвонки будут искажены

Если у вашего партнера по отношениям на расстоянии день рождения, как вы его отметите?

Отправить сообщение WeChat? Простые слова кажутся немного холодными.

Сделать звонок? Настоящие эмоции кажутся высвобождаемыми недостаточно полно.

Сделать видеозвонок? Всегда есть ощущение невидимости.

В это время мы всегда думаем: было бы лучше, если бы мы впервые оказались рядом друг с другом.

Тем не менее, произвольная дверь Дораэмона все еще слишком продвинута для человеческих технологий в 21 веке, но не расстраивайтесь, по крайней мере, теперь мы можем отправлять друг другу виртуальное «я».

Какая? Думаешь, я снова буду говорить о загадочной метавселенной?

Я говорю не о безногом аватаре из комиксов, а о голографическом «ты», который выглядит почти так же, как ты.

Разговор с «настоящими людьми»

На конференции Google I/O в мае прошлого года генеральный директор Google Сундар Пичаи представил Project Starline, проект, который может реализовать голографические 3D-видеозвонки, не полагаясь на гарнитуры.

Проект Starline является одним из строго конфиденциальных экспериментальных проектов Google.По словам исследователей Google, команда проекта начала проводить соответствующие технические исследования 6 лет назад, и он не будет обнародован до 2021 года, и с тех пор он хранит молчание. почти весь год.

Когда люди подумали, что это очередной проект Google по «рисованию пирога», Project Starline недавно пригласил СМИ и партнеров, в том числе The Verge, в лабораторию, чтобы испытать это на себе.

Редактор Verge Джей Питерс посетовал после опыта, что это самое реалистичное взаимодействие с виртуальной реальностью, которое он когда-либо испытывал: «Такое ощущение, что научная фантастика сияет в реальности».

Средства человеческого общения постоянно совершенствуются с развитием информационных технологий. От древних телеграмм до телефонных звонков и видеозвонков масштабы передачи информации человеком постоянно совершенствуются, а своевременность и содержание передачи информации также постоянно улучшаются.

Если эти два измерения использовать в качестве координатных осей развития, нетрудно представить, что следующий этап коммуникационных технологий будет охватывать более богатый контент, такой как звук, изображение и пространственное положение, и сможет передавать его мгновенно, почти без задержки.

Во многих научно-фантастических фильмах создатели научной фантастики считают, что голографические стереоскопические видеозвонки — это следующее поколение методов связи, соответствующих этому определению.

Другими словами, после того, как люди успешно привлекли к себе знакомые лица, следующим шагом будет их личное присутствие на сцене.

В результате появился проект Project Starline.

Эндрю Нарткер, директор по управлению продуктами Starline, упомянул в интервью средствам массовой информации, что их прорывы в коммуникационных технологиях позволили пользователям стать более близкими и связанными с людьми по всему миру.

Судя по внешнему виду инсталляции Project Starline, она не имеет отношения к высокотехнологичным словам, таким как «3D» и «голографическое изображение» — вы должны знать, что в фантастических фильмах главные герои выносятся сквозь футуристический металл. круглое основание.По сравнению с голографическим стереопроекционным звонком, Project Starline больше похож на тонкий комод.

Когда включился большой экран Project Starline, ощущение новейших технологий медленно раскрылось.

Джей Питерс сказал, что проект Starline похож на волшебное окно, которое соединяет две комнаты воедино. Сидящий напротив него исследователь Google выглядит почти такого же роста и внешности, как реальный человек. Когда он вручает яблоко, он даже может чувствовать пространственное расстояние который приближает реальный мир через тени на картинке.

Это похоже на взаимодействие лицом к лицу за одним столом, настолько реалистичное, что вы почти забываете, что две испытательные комнаты на самом деле далеко друг от друга.

Причина, по которой термин «реализм» используется для описания этой уникальной встречи (вы никогда не услышите, чтобы кто-то сказал, что человек во время видеозвонка выглядит так реалистично), заключается в том, что экран, отображаемый на экранном терминале, — это не просто видеоэкран. «виртуальный человек», который повторно визуализируется на основе такой информации, как изображения и глубина, что является ключом к созданию сюрреалистического присутствия.

3D секреты

Почему виртуализация реальных людей более реальна? Чтобы понять эту проблему, начните с того, как работает проект Starline.

Сидя перед этим изысканным «туалетным столиком», больше всего бросается в глаза большой 65-дюймовый экран. Это не обычный домашний телевизор, а трехмерный дисплей со световым полем 8K/60 Гц. Исследователи Google называют его монокуляром. наблюдаемая плотность пикселей в два раза выше, чем у устройств виртуальной реальности, таких как Oculus Quest, что обеспечивает более четкое стереоскопическое отображение.

Чтобы это отображение светового поля отображало стереоскопический эффект, необходимо собрать информацию о глубине объекта. Исследователи разместили несколько бинокулярных стереокамер и инфракрасных камер в верхней и нижней части экрана, чтобы можно было восстановить пространственное расстояние между персонажами путем объединения информации о глубине под разными углами.

Несколько монохромных камер слежения также установлены с обеих сторон и сверху экрана для трехмерного позиционирования черт лица персонажа в режиме реального времени, чтобы можно было точно восстановить модель персонажа, когда персонаж движется.

Когда собранная информация о положении и изображении передается на принимающую сторону, система визуализирует три потока глубины в соответствии с положением левого и правого глаз аудитории и смешивает их с потоком текстуры для воспроизведения реалистичного «виртуального человека».

В это время, когда положение глаз зрителя изменяется, положение изображения будет следовать за движением глазного яблока, чтобы сделать небольшое позиционное отклонение, что является пространственной реальностью, которую не могут обеспечить традиционные 2D-изображения.

Помимо визуального разрушения «пространственной стены», Project Starline также приложил немало усилий для слуха.

На входе микрофон может формировать направленный динамический луч с данными отслеживания лица для снижения шума и защиты от помех. На выходе система слежения определяет местонахождение ушей аудитории, имитируя пространственную ориентацию разговора, заставляя его звучать так, как будто на экране говорит рот.

Только представьте, когда вы хотите провести важную видеоконференцию с коллегами и партнерами, участникам больше не нужно сосредотачиваться на маленьком экране, и их глаза больше не должны быть размыты из камеры, а могут установить естественный зрительный контакт с вы. , и даже использовать язык тела для помощи в самовыражении, такой опыт участия будет качественным скачком.

Однако на данном этапе проект Starline еще далек от практического применения.

Редактор Wired Лорен Гуд сказала после знакомства с Project Starline, что, хотя визуальные эффекты голографического видео в большинстве случаев великолепны, когда персонаж слишком много двигается, исходное стереоскопическое изображение ненадолго меняется обратно на плоскость, которая не очень ощущается. .

Исследователи Google также упомянули, что при работе со сложными формами (такими как пушистые волосы, оптические очки) или движущимися объектами часто появляются ложные «артефакты», и их команда в настоящее время работает над повышением точности обработки изображений.

Помимо технических препятствий, стоимость развертывания полного комплекта проекта Starline также достаточно высока: дорогим дисплеям светового поля и различным оптическим камерам в настоящее время суждено стать лишь лабораторными изделиями, а выйти на потребительский рынок практически невозможно. возможный.

Эндрю Нарткеркт откровенно сказал в интервью The Verge, что Project Starline — это захватывающая новая технология и прорыв в области пространственного взаимодействия, но в настоящее время его вряд ли можно назвать «продуктом».

У моря есть наперсник, а мир как сосед

Так что же именно пытается решить Project Starline? Ответ, который дает команда проекта, тоже очень прост: сделать так, чтобы вы почувствовали, что находитесь с реальным человеком.

В прошлом году программное обеспечение для удаленных конференций, представленное Zoom, широко использовалось на предприятиях и в школах.Люди разлучены по разным причинам и должны работать вместе с помощью этих видеопрограмм и даже организовывать редкие встречи.Связь с людьми также была разбавленный в результате.

В отчете о влиянии видеоконференций на производительность Microsoft упомянула, что люди чаще отвлекаются во время видеоконференций, чем в реальном общении, что является естественной реакцией людей, сталкивающихся с видеоконференциями с высоким уровнем стресса.

Проект Starline, обеспечивающий реальный диалог, кажется, устраняет это чувство давления, которое мешает общению.

Хотя в Project Starline полно всевозможной операторской техники, когда она заработает, эти холодные технологии останутся позади участников, потому что в это время человек, который сидит перед ним, является почти реальным человеком». человек".

Исследователи Google провели сравнительный эксперимент и обнаружили, что по сравнению с традиционной видеосвязью участники, которые общались с помощью Project Starline, имели больше зрительного контакта и языка тела, а также смогли вспомнить на 28% больше контента после общения. В этом может быть прелесть естественного общения.

В настоящее время Project Starline является лишь небольшим экспериментом для сотрудников Google. Google заявила, что, начиная с этого года, она будет постепенно открывать тест для партнеров, включая Salesforce, WeWork и T-Mobile, чтобы стимулировать людей к созданию более глубоких связей.

Станет ли Project Starline популярным в будущем как телефонная будка для эпохи 3D?

Для столь технологичного проекта в настоящее время сложно дать заключение по этому вопросу.Проект Старлайн может и удастся стать реальным продуктом, но он также будет затянут излишними затратами и приведет к мертворождению, а может даже стать Google Часть будущей технологии AR, VR.

Но несмотря ни на что, такая технология будущего, отвечающая реальным потребностям людей, заслуживает большего внимания со стороны технологических кругов.

Ведь в то время, когда люди привыкли к разлуке, нет ничего дороже, чем увидеть друг друга вживую.

#Добро пожаловать на официальную учетную запись Айфанер в WeChat: Айфанер (WeChat: ifanr), в ближайшее время вам будет представлен более интересный контент.

Love Faner | Исходная ссылка · Просмотреть комментарии · Sina Weibo