Apple видит, что искусственный интеллект будет продвигать Vision Pro. Что ему нужно, так это поворот в области здравоохранения

Амбиции Apple в захватывающем мире дополненной и виртуальной реальности (AR и VR) начинаются с трудного начала. Vision Pro за 3500 долларов не смог спровоцировать рыночный шторм. Затем появились сообщения о том, что Apple отменяет проект умных очков AR.

Однако компания еще не закончила. По данным Bloomberg , Apple переносит на платформу VisionOS свой набор инструментов искусственного интеллекта под названием Apple Intelligence . Это означает, что в гарнитуру появятся такие трюки искусственного интеллекта, как «Письменные инструменты», «Genmoji» и «Игровая площадка для изображений».

Это не очень впечатляющие обновления для Vision Pro, особенно учитывая его высокую цену и тот набор передовых технологий, который он может предложить. В конце концов, вы покупаете гарнитуру AR/VR за 3500 долларов не для того, чтобы исправлять грамматику или создавать стикеры, созданные искусственным интеллектом.

Вместо этого Apple следует сосредоточиться на сегменте здравоохранения и медицинской науки. Это ниша, где можно найти более серьезных покупателей для такого устройства, как Vision Pro, чем средний покупатель, заинтересованный в гарнитуре AR или VR для развлекательных задач, таких как игры или просмотр захватывающих видео.

Он готов к приему

Область медицинской науки не новичка в достижениях AR и VR и, в частности, в их огромном потенциале в повседневной деятельности ученого или медицинского работника. Вот что говорят эксперты Стэнфордского университета о потенциале технологий AR/V:

«В будущем пациенты смогут носить дисплеи VR и AR во время телемедицинских визитов для измерения жизненно важных показателей и других показателей здоровья врача, а затем автоматически добавлять данные в электронную медицинскую карту с разрешения пациента».

Они также упоминают, как техники скорой медицинской помощи (ЕМТ) могут оценить медицинскую ситуацию и получить соответствующие инструкции, когда они видят и передают состояние пациента непосредственно опытному врачу через гарнитуру или умные очки.

Например, NARA (Nakamir Augmented Reality Assistant) сочетает в себе искусственный интеллект и дополненную реальность на Microsoft HoloLens 2 для помощи работникам в различных областях, включая здравоохранение. В другом проверенном сценарии можно использовать гарнитуру смешанной реальности или очки AR, чтобы помочь человеку принять экстренные меры по спасению жизни.

Эксперты также предлагают включить такое оборудование в комплекты автоматических внешних дефибрилляторов (АВД), чтобы инструкции по использованию и другие подобные протоколы можно было предоставлять более захватывающим образом во время чрезвычайных ситуаций.

Ребята из Heru используют гарнитуры, чтобы предлагать услуги оптометрии, например, проводить проверку зрения на дому. Тест проводится дома, а соответствующие данные передаются специалистам здравоохранения, которые впоследствии на основе результатов могут составить план дальнейшей помощи.

Прецедентов много

В сфере психического здоровья и благополучия VR-оборудование также может помочь «внимательность для снижения стресса при посттравматическом стрессе, фокусировка внимания при СДВГ, закрепление навыков, изучаемых в рамках когнитивно-поведенческой терапии, или тренировка памяти и когнитивных способностей при нейродегенеративных заболеваниях».

Пилотное исследование, проведенное Лабораторией стратегических инициатив Министерства по делам ветеранов США, показало , что опыт, основанный на виртуальной реальности, может помочь облегчить одиночество, облегчить беспокойство и помочь справиться с болью и стрессом, а также с другими проблемами психического здоровья у ветеранов. Правительственное агентство также предлагает подробное Вводное руководство по иммерсивным технологиям ( PDF ), которое поможет обеспечить ветеранам правильный уход с помощью XR.

Профессора Ким Баллок и Джереми Бэйленсон из Стэнфорда недавно подробно рассказали, как физиотерапия с использованием виртуальной реальности и зеркальная визуальная обратная связь (MVF) могут помочь детям, живущим с церебральным параличом, неврологическим расстройством, которое серьезно затрудняет движения тела и позу.

Их результаты были опубликованы в Американском журнале психиатрии и неврологии . Компания XRHealth предлагает пациентам широкий спектр лечения боли, когнитивной тренировки, нейрореабилитации и ухода за осознанностью с помощью VR-гарнитур и терапевтических приложений, зарегистрированных FDA.

Ребята из NYU Langone Health используют технологии AR и VR для создания иммерсивных 3D-модулей анатомии, которые предоставляют студентам-медикам фотореалистичный опыт, позволяя им детально изучать анатомические структуры.

Исследователи из Медицинской школы Майами Миллера недавно проверили, как VR-гарнитуры могут облегчить значительный стресс, испытываемый во время беременности, родов и послеродового периода.

У Apple есть готовый стек

Возможности применения Vision Pro в здравоохранении безграничны, поскольку эта область продолжает расширяться, а исследования набирают обороты. Эксперты предполагают, что датчики, например датчики, способные измерять электроэнцефалографию (ЭЭГ), могут быть интегрированы в рентгеновское оборудование, чтобы помочь пациентам с болезнью Альцгеймера.

Apple уже производит широкий спектр устройств, оснащенных биосенсорами, способными регистрировать широкий набор биомаркеров. Они могут оказаться большим подспорьем для врачей при оценке истории здоровья пациента, например, сердечного ритма и режима сна. Например, Apple Watch могут измерять уровень насыщения кислородом, определять нерегулярный ритм сердечного ритма , распознавать отклонения температуры и многое другое.

Наушники Beats PowerBeats Pro 2 могут измерять частоту сердечных сокращений. Все эти биосенсорные данные привязаны к платформе Apple Health, которая доступна на широком спектре устройств. Более глубокое внедрение Vision Pro в эту экосистему не станет проблемой для Apple.

«Множество возможностей использования VR-гарнитур и AR-очков в здравоохранении на дому дают веские основания для разработки HMD для измерения биосигналов, обеспечения безопасной потоковой передачи видео в телемедицине и проведения иммерсивной терапии», — пишет Анджела Макинтайр, исполнительный директор Стэнфордской инициативы по носимой электронике (eWEAR) в Стэнфордском университете.

Да, существуют риски кибербезопасности и конфиденциальности. Но если есть одна компания, которая проделала приемлемую работу по защите конфиденциальности пользователей в сфере технологий, то это Apple. Более того, компания не вступит на неизведанную территорию, если будет продвигать Vision Pro как продукт, ориентированный на здоровье.

Управление по санитарному надзору за качеством пищевых продуктов и медикаментов США (FDA) уже предоставило запрос De Novo или предпродажное одобрение — через разрешение 510 (k) — на широкий спектр оборудования AR/VR в области медицины. По состоянию на сентябрь 2024 года агентство разрешило использование 69 медицинских устройств, использующих технологии AR и VR для диагностики, лечения, телемедицины, виртуальной помощи и терапевтических целей.

На другом конце уравнения Apple уже работает с широким кругом научных экспертов и образовательных учреждений. Для своего последнего исследования в области здравоохранения компания привлекла экспертов из Гарвардской медицинской школы, чтобы оценить, как данные, собранные с iPhone и носимых устройств, могут способствовать дальнейшему научному исследованию.

Vision Pro обладает всей вычислительной мощностью и одной из самых передовых технологий отображения AR/VR, которые может предложить отрасль. Все, что ему нужно, — это решительно продвинуться в область, где преимущества AR и VR имеют доказанный опыт, а также широко используются экспертами.

Было бы разумно найти такую ​​медицинскую полезность в гарнитуре за 3500 долларов, а не в том, что Apple продает яркую мечту о виртуальных вычислениях, которые уже можно прекрасно реализовать с помощью Mac и пары менее громоздких очков XR при гораздо меньшем бюджете.