Что такое EyeSight в гарнитуре Apple Vision Pro? Как это работает?

Революционная функция EyeSight в Apple Vision Pro — это то, чего мы раньше не видели в гарнитурах AR/VR. Итак, вот все, что вам нужно знать об этом.

Гарнитура Vision Pro от Apple стоимостью 3499 долларов имеет революционную функцию под названием EyeSight. Функция EyeSight, встроенная в VisionOS, снижает ощущение изоляции при ношении гарнитуры.

Vision Pro дает вам ощущение, что люди поблизости являются частью вашего опыта дополненной реальности (AR). Он также показывает окружающим, видите ли вы их или погружены в AR, предоставляя визуальные подсказки о том, на чем вы сосредоточены.

Следуйте инструкциям, чтобы узнать все о EyeSight, в том числе о том, как он работает, о различных режимах погружения, которые он поддерживает, и многом другом.

EyeSight, сочетающий в себе аппаратное и программное обеспечение, является одной из лучших функций гарнитуры Vision Pro. Его основная цель — показать другим цифровую версию ваших мигающих глаз.

«Ваши глаза — важнейший индикатор связи и эмоций, поэтому Vision Pro отображает ваши глаза, когда кто-то находится рядом», — заявила Apple во время выступления на WWDC 2023. Эффект делает устройство прозрачным. Кроме того, EyeSight может отображать различные движущиеся фоны, чтобы информировать людей в реальном мире, на чем вы сейчас сосредоточены.

В сообщении Apple Newsroom Apple называет эту функцию «экстраординарной инновацией, которая помогает пользователям оставаться на связи с окружающими». Конечно, на других гарнитурах AR/VR нет ничего похожего на EyeSight.

На обращенной наружу OLED-панели на передней панели гарнитуры используется двояковыпуклая линза, которая, по словам Apple, проецирует «правильную перспективу ваших глаз для каждого человека, смотрящего на вас».

Когда Vision Pro обнаруживает, что вы потребляете мультимедиа или используете приложение, он отображает соответствующую графику на дисплее EyeSight для предоставления визуальных подсказок. Однако, когда кто-то приближается к вам, Vision Pro вместо этого покажет ваши глаза.

Чтобы реалистично показать ваши глаза, EyeSight использует данные внутренних инфракрасных камер, по две на каждый глаз, чтобы фиксировать движение глаз и выражение лица. Эти данные передаются в алгоритм машинного обучения, который объединяет их с вашим цифровым персонажем, созданным при настройке устройства с помощью фронтальной камеры TrueDepth.

То, что видят другие, — это естественное изображение области вокруг ваших глаз, а не ваши настоящие глаза.

EyeSight поддерживает несколько визуальных подсказок, позволяющих другим узнать, что вы делаете в AR, например, полностью погружаетесь в AR, фотографируете и т. д. EyeSight автоматически переключает режимы в зависимости от того, что вы делаете в любой момент. Таким образом, функция EyeSight — одно из самых крутых применений технологии AR в повседневной жизни, которые мы когда-либо видели.

Этот режим позволяет вам видеть другого человека, открывая ему свои глаза. Когда датчики гарнитуры обнаруживают приближающегося к вам человека, EyeSight временно заставит его «ворваться» в ваш мир AR/VR, чтобы вы знали, что он рядом.

В то же время эта функция покажет ваши глаза человеку перед вами, чтобы он знал, что привлекает ваше внимание. Когда в комнате никого нет, EyeSight отключится и не будет отображать ваши глаза или какой-либо пользовательский фон.

При полном погружении в AR или VR EyeSight анимирует красочный рисунок на обращенном наружу дисплее. Эффект чем-то похож на анимацию сферы Siri, и окружающие будут знать, что вы заняты чем-то. EyeSight также может делать ваши глаза полупрозрачными при использовании приложения, в зависимости от уровня погружения.

EyeSight переходит в этот режим при съемке пространственных фотографий и видео с помощью гарнитуры. Визуальным индикатором режима захвата мультимедиа является белый туманный узор, который анимируется во время записи или мигает, когда вы делаете снимок.

Визуальный индикатор служит для окружающих важным индикатором конфиденциальности того, что вы их записываете, подобно звуку затвора камеры на вашем iPhone.

То, что звучало как сумасшедший слух, оказалось правдой. Функция EyeSight, уникальная для Vision Pro, является одним из самых больших преимуществ Apple перед конкурирующими гарнитурами AR/VR. Если вся цель состоит в том, чтобы сделать ношение лицевого компьютера более человечным, EyeSight с этим справится.