Apple играет в «игру в имитацию», обманывающую чувства

Особенностью iPad Pro 2024 года, которая меня больше всего интересует, является не новый чип M4 или новый OLED-экран, а крошечная «химическая реакция» между Apple Pencil Pro и iPad Pro 2024 года: когда вы используете Apple Когда Pencil Pro рисует и пишет на iPad Pro 2024 года тень соответствующей кисти будет отображаться на экране, чтобы пользователи знали, в каком режиме сейчас находится Apple Pencil Pro.

Впоследствии кто-то нашел в фреймворке Apple PencilKit 10 3D-моделей, разработанных Apple для этой функции.

И что интересно, эта тень не является простой текстурой. Она будет меняться соответственно в зависимости от положения Apple Pencil Pro в реальном мире, расстояния от экрана и угла наклона. Короче говоря, она обладает сильной «подлинностью». , «ощущение пространства» и «интерактивность».

Также была раскрыта дополнительная информация об этом Apple Pencil Pro: Apple оснастила его новым механизмом тактильной обратной связи, новым датчиком давления, гироскопом и чипом U2. Он может имитировать реальный процесс письма на iPad Pro, а также может быть связан с Vision Pro.

Игра-подражатель Apple

Apple — это компания в мире, которая любит имитировать реальные сенсорные ощущения с помощью аппаратного обеспечения.

Taptic Engine, установленный на MacBook 2015 года, успешно обеспечивает «фальшивость и реальность» за счет точной имитации вибрации и прикосновения. Возможно, до сих пор многие люди до сих пор не знают, что сам трекпад Force Touch MacBook представляет собой плоскую поверхность, на которую «нельзя нажимать».

Независимо от того, 3D Touch это или нынешний Haptic Touch, не чувствительный к давлению, iPhone использует это плоское стекло, чтобы имитировать волшебное ощущение отскока при нажатии кнопки за счет правильной вибрационной обратной связи. Звуковой эффект нажатия кнопки создается. люди не могут удержаться от нажатия на нее несколько раз.

Та же технология используется в кнопке «Домой» iPhone 7 и вращающейся заводной головке Apple Watch, тактильное ощущение которых очень близко к механическим кнопкам и шестеренкам.

Помимо использования Taptic Engine для «обманывания» пальцев пользователей, устройства iOS 14 и AirPods создают «пространственный звук», который имитирует звуки в различных направлениях в трехмерном пространстве, и технологию отслеживания головы, чтобы дать пользователям «ощущение погружения в звук». . В социальных сетях многие пользователи говорили, что после включения пространственного звука им казалось, что на их телефонах играют на улице, когда они надевали наушники.

Перед выпуском Apple Pencil Pro многие источники предсказывали, что Apple оснастит эту новую ручку новым Taptic Engine, чтобы Apple Pencil Pro и iPad также могли обеспечить реалистичное ощущение трения, близкое к ощущению трения бумаги и ручки.

Это звучит немного «научно-фантастически», но это не заставляет людей чувствовать себя неразумно, потому что Apple — производитель, который любит и умеет играть с вибрационными двигателями. Даже если текущий Pencil еще не реализовал соответствующие функции, он все равно перспективен в будущем.

Еще одна компания, которая также любит использовать оборудование для обмана чувств пользователей, — это Nintendo.

Ручка Joy-Con на Nitendo Switch поддерживает технологию «HD вибрации». Игроки могут различить тонкую разницу между «наливом льда в чашку» и «наливом воды в чашку», просто полагаясь на разные ощущения вибрации. В сочетании с бумажным костюмом Switch Labo гироскоп и вибромотор в ручке также способны воссоздать настоящее ощущение ловли рыбы из воды.

Будь то магия вибрации Apple или комплект и контроллер Labo от Nintendo, «одно аппаратное обеспечение» используется для моделирования «бесчисленных возможностей».

Например, Taptic Engine на iPhone 7 не только имитирует кнопку «Домой» и 3D Touch. Телефон вибрирует как «трясение головой» при неправильном вводе пароля, а также различные обратные связи в системе. Все действия от вибрации зависят. на этом огромном внутреннем Taptic Engine завершено.

Пространственный звук аналогичен. С помощью гироскопов и акселерометров AirPods Max может имитировать сложные звуки с ощущением пространственной ориентации.

Если Nintendo стремится предоставить игрокам более реалистичный игровой процесс, то «имитационная игра» Apple представляет собой полный спектр симуляций, охватывающих осязание, слух и зрение.

Поэтому проекция Apple Pencil Pro ни в коем случае не является изолированной пасхалкой.

План завершения Vision Pro

В ходе тестирования VisionOS в прошлом году некоторые разработчики обнаружили, что, когда пользователь держал Apple Pencil, Vision Pro не мог нормально распознавать сведение пальцев. Однако в официальном отзыве говорилось, что «это разработанная функция, а не ОШИБКА». .» Видимое распознавание Apple Pencil, скорее всего, уже присутствует в Vision Pro.

Добавление аппаратного обеспечения, такого как двигатель тактильной обратной связи, новый датчик давления, гироскоп и чип U2, делает его больше похожим на меньший контроллер VR, и логика очень похожа.

По совпадению, Logitech выпустила стилус для VR-устройств MX INK для Meta Quest 2 и 3.

Этот стилус, который на 10 грамм тяжелее Apple Pencil 2, может не только создавать плоский контент в среде смешанной реальности, как традиционный стилус, но также поддерживает шесть степеней свободы отслеживания для свободного творчества в трехмерном пространстве. Корпус пера оснащен. Имеется несколько кнопок, а кончик пера также чувствителен к давлению.

Итак, нужна ли Vision Pro ручка? Другими словами, нужны ли для этого «периферийные устройства», кроме глаз и пальцев?

Прежде чем говорить об этом открытом вопросе, мы можем взглянуть на серию научно-популярных видеороликов, которые Apple подготовила для разработчиков на WWDC24: например, «Создание увлекательного опыта использования космических фотографий и видео».

В нем упоминается множество концептуальных вещей. Apple делит стереоскопическое видео на: 3D-видео, пространственное видео и иммерсивное видео Apple:

• 3D-видео представлено на плоской поверхности, а контент имеет ощущение глубины, как в 3D-фильмах, которые мы смотрим в кинотеатре.
• Пространственное видео, помимо трехмерного ощущения, будет масштабироваться до истинного размера объекта, а границы будут размыты.
• Иммерсивное видео полностью окружает пользователя. Пользователь не смотрит видео, а погружается в него.

Среди них «пространственное видео» может имитировать ощущение присутствия людей в реальном мире и изменять угол обзора в определенных пределах, тогда как «иммерсивное видео» является еще более экстремальным. Все, что видит пользователь, — это видео, и пользователь становится им; пользователь части видео.

Более того, Apple также выдвинула дополнительные требования. Например, иммерсивные видеоролики должны иметь интерактивный 3D-контент.

В научно-популярном видеоролике также упоминается понятие «пространственные метаданные», а также есть объяснение «проекции»: Проекция определяет отношения между объектами в мире и пикселями на изображении.

Маленькая пасхалка в Apple Pencil Pro также объясняется в научно-популярном видеоролике разработчика Vision Pro: Apple никогда не рассматривала iPad Pro 2024 и Apple Pencil Pro как отдельные устройства. Они соединены посредством «проекции».

Другими словами, в будущем Apple Pencil можно будет «проецировать» на различные ручки разной формы в виртуальном мире Vision Pro.

Поскольку Vision Pro может объяснить вопросы об Apple Pencil Pro, то у Apple, как мастера этой «игры в имитацию», также есть основания полагать, что текущий Vision Pro все еще находится на ранней стадии продукта и уже может достичь значительной степени визуальной и слуховой производительности. Это «фальшиво и реально», но этого недостаточно с точки зрения осязания. Это, естественно, сводится к тому, что у Vision Pro нет специально адаптированной периферии. положиться на Vision Pro, который взорвет нам мозги, верно?

Теперь мы почти уверены, что Apple Pencil Pro с вибромотором, гироскопом и чипом U2 можно связать с Vision Pro. Apple Pencil Pro также можно проецировать на экран в «других образах», например, в виде чернильной ручки; ручку можно было бы использовать как контроллеры других устройств виртуальной реальности, превратив ее в световой меч в игре Sabre Beat или палочку в серии о Гарри Поттере?

Если вы проявите немного больше фантазии, возможно, Apple выпустит «перчатку с силовой обратной связью». Вся перчатка покрыта вибромоторами, и с помощью настроек Apple пользователи действительно смогут «прикоснуться» к виртуальному миру, представленному Vision Pro.

Почти наверняка Apple уже думает о том, как добавить больше «взаимодействий» в Vision Pro, потому что Vision Pro еще не завершен, а «имитационная игра» Apple по замене реальности виртуальностью еще далека от завершения.

Важность «реализма»

В предыдущих статьях мы обсуждали важность ключей. Когда дело доходит до Vision Pro, сценария, который позволяет пользователям не испытывать «физической нагрузки», взаимодействие и обратная связь, можно сказать, становятся еще более важными. Главный редактор технологического журнала Wired однажды сказал следующее:

Все устройства требуют взаимодействия. Если что-то не кажется интерактивным, оно считается сломанным.

Это идеально соответствовало моему первому опыту работы с Vision Pro: независимо от того, каким образом и где я пытался использовать жесты, я не мог нажать кнопку, которую хотел нажать, и даже не знал, что это проблема Vision Pro. или это моя собственная проблема.

Поэтому, даже если Apple придется отрезать 3,5-мм разъем для наушников и уменьшить емкость аккумулятора, ей все равно придется освободить место для огромного Taptic Engine, который не только продлевает срок службы компонента за счет отказа от механической конструкции, но и обеспечивает реалистичность интерактивной обратной связи.

Настоящее ощущение взаимодействия — это не просто сигнал обратной связи о том, сломалось ли устройство. Если хотите копнуть глубже, мы полностью перешли от эпохи «кнопок» к эпохе «сенсорности», а также вступаем в эпоху «воздух-». операция кондиционирования» эпоха. В будущем, возможно, нам больше не нужно будет прикасаться к какому-либо устройству для выполнения различных операций. Нас будут окружать различные голографические интерфейсы. Все, что нам нужно делать, — это указывать в воздухе или использовать голосовое управление, чтобы делать то, что мы хотим.

Это размытое будущее между виртуальным и реальным принесет нам всевозможную неопределенность. Например, как узнать, что вы живой человек, а не мозг в чане?

Возможно, «игра в имитацию» Apple однажды полностью закончится изменениями в операциях, но до этого мы еще можем ожидать, как Apple будет использовать различные методы, чтобы обмануть наши пальцы и мозги.

# Добро пожаловать на официальную общедоступную учетную запись WeChat aifaner: aifaner (идентификатор WeChat: ifanr). Более интересный контент будет предоставлен вам как можно скорее.

Ай Фанер | Исходная ссылка · Посмотреть комментарии · Sina Weibo