Apple презентовала шлем смешанной реальности: он наложит цифровой мир на вашу жизнь

Apple открыла 34-ю конференцию для разработчиков WWDC, представив новый для себя продукт — шлем смешанной реальности под названием Vision Pro. Устройство, благодаря которому цифровые объекты «накладываются» на картину реального мира, позволит Apple составить конкуренцию другим лидерам индустрии — Meta, Sony и Microsoft, сообщает «Медуза» .

Как устроен шлем от Apple

Гарнитура смешанной реальности Apple Vision Pro похожа на пару лыжных очков. Передняя часть выполнена из стекла, а рама — из алюминиевого сплава. «Маска» с тканевой подкладкой может подстроиться под разные формы лиц . А размер ребристого ремешка — они будут доступны в нескольких цветах — регулируется.

У Apple Vision Pro всего две кнопки: главная — например, для съемки фото и видео, а также колесико, необходимое в основном для переключения между дополненной реальностью и полным погружением в виртуальную.

Компания утверждает, что использовала самые легкие материалы из доступных, но вес гарнитуры в презентации не упоминает. Встроенные microLED-дисплеи (Apple сравнивает их размер с почтовыми марками) суммарно отражают 23 миллиона пикселей, что больше, чем в двух 4К-экранах (там — до 17 миллионов). Это должно дать картинку, на которой пиксели незаметны человеческому глазу.

По теме:

Гарнитура работает на двух собственных чипах Apple — M2, который ранее встраивали в макбуки, и R1, созданном специально под новое устройство. Первый отвечает за производительность, а второй — за обработку данных со всех датчиков в реальном времени, в том числе с LiDAR, 12 камер и шести микрофонов.

Apple предлагает носить батарею для устройства в кармане

Apple Vision Pro может автономно работать до двух часов — для этого гарнитуру нужно через короткий кабель подключить к небольшому внешнему аккумулятору. Внешний аккумулятор объясняют тем, что без него девайс стал легче.В промо-ролике пользователи гарнитуры носили батарею в кармане штанов. Если требуется более длительная работа, устройство можно подключить напрямую к розетке.

Apple Vision Pro has all-day use when you have it plugged in, but just 2 hours on battery with the external pack that you slip into your pocket pic.twitter.com/oEvC94cMUW

— Tom Warren (@tomwarren) June 5, 2023

Движение глаз

При помощи функцию EyeSight на корпусе гарнитуры будут отображаться глаза пользователя, когда он будет общаться с кем-то из «реального» мира. А если человек подойдёт поближе, то будет отображаться в устройстве.

По теме: Как узнать, кто звонит вам с анонимного номера: простой лайфхак

То есть устройство имеет обращенный наружу дисплей, который будет отображать движения глаз и выражения лица, позволяя собеседникам взаимодействовать с человеком, носящим гарнитуру, без ощущения, что они разговаривают с роботом.

Al usar el Apple Vision Pro podrás tener varias aplicaciones al mismo tiempo, y si llega una persona cerca de ti, aparecerá en tu entorno#WWDC23 pic.twitter.com/g5rJjDZVfh

— Pato González ???? (@patog7) June 5, 2023

А как быть во время видеозвонка, к примеру, через FaceTime. На этот случай гарнитура создаст цифровой аватар (Persona) — другие собеседники увидят лицо без надетого устройства.

This is what your Digital Persona looks like on the Apple Vision Pro. #WWDC23 pic.twitter.com/tWkIvOguBz

— Mark Spoonauer (@mspoonauer) June 5, 2023

Applе утверждает, что другие компании не увидят, какие сайты и приложения посещает пользователь гарнитуры. Для безопасности используется аналог Face ID — система Optic ID, распознающая владельца Vision Pro. Все данные зашифрованы и хранятся только на самом устройстве.
Без дополнительного управления.

Гарнитурой Apple можно будет управлять глазами, голосовым помощником и руками. Например, выбрать элемент в приложении — кнопку или иконку — можно будет, просто посмотрев на него, а чтобы открыть его, надо будет просто «кликнув» большим и указательным пальцами, сведя их между собой. Для прокрутки достаточно сделать движение запястьем. При этом руки не придется держать перед собой — камеры видят, как они лежат на коленях пользователя или на столе.

Стерлинг Кристпин, бывший разработчик Apple Vision Pro, сообщил, что на протяжении нескольких лет до 2021 года работал над этой гарнитурой. По его словам, один из ключевых элементов управления — глаза, сообщает Wylsa. Если верить ему, то Apple пытается предугадать, что именно сейчас сотворит пользователь.

“В целом большая часть моей работы заключалась в определении психического состояния пользователей на основе данных их тела и мозга, когда они используют гарнитуру. Итак, пользователь находится в смешанной или виртуальной реальности, а модели искусственного интеллекта пытаются предсказать, испытываете ли вы любопытство, зависли в мыслях, испытываете страх, сфокусированы, что-то вспоминаете или находитесь в каком-то другом когнитивном состоянии, – говорит Кристпин. – Всё это можно определить с помощью отслеживания взгляда, электрической активности мозга, сердечных сокращений и ритмов, мышечной активности и т. д. Есть много трюков, чтобы сделать возможными конкретные прогнозы. Один из самых крутых результатов заключался в том, чтобы предсказать, что пользователь нажмет на что-то, прежде чем он это сделает”.

Два динамика, встроенные в устройство, дают ощущение, что звук идет из окружающего пространства. Для этого используется технология пространственного аудио (Spatial Audio), которая есть в AirPods Pro.

Девайс для работы и отдыха

XR-гарнитура позволяет отключить внешнюю реальность. Это можно сделать с помощью цифровой коронки, как у Apple Watch или AirPods Max, тем самым регулируя степень доступа к реальности.

Нравится статья? Поддержите ForumDaily!

Пользователь Vision Pro может вывести на виртуальный экран несколько приложений одновременно, а переключить работу с одного на другое — при помощи простого поворота головы. Текст (как и остальные элементы) останется максимальным четким, под каким бы углом владелец гарнитуры на него ни смотрел.

К Vision Pro можно подключить MacBook или Mac — и открыть рабочий стол компьютера, не снимая гарнитуры. Для печати можно использовать как клавиатуру Magic Keyboard, так и виртуальную, а также Magic Trackpad.

Wow! Thank you Apple for including my startup https://t.co/5TAEY6Svlc in your Vision Pro segment** for browsing the web.

**Before I get Community Noted, Apple did not include Bearly AI (but a Vietnamese-Canadian guy can dream) pic.twitter.com/0bkVRibj79

— Trung Phan (@TrungTPhan) June 5, 2023

Кинотеатр в кармане

По мнению Apple, гарнитуру удобно использовать для просмотра фото и видео в максимально доступном качестве. Например — сделанные на айфон панорамы в огромном размере.

На Vision Pro также можно снимать трехмерные фото и видео — и сохранять что-то вроде «объемных воспоминаний», к которым можно вернуться позже (с помощью того же шлема, конечно).

Apple также продвигает Apple Vision Pro как способ еще сильнее погружаться в фильмы — и предлагает превратить устройство в «личный кинотеатр», в том числе для просмотра 3D-лент.

Watching movies on Vision Pro will be insane! #WWDC23 pic.twitter.com/JYs3tmtA0U

— Apple Hub (@theapplehub) June 5, 2023

В первый же день пользователям гарнитуры будут доступны собственный стриминг-сервис компании Apple TV+, а также Disney Plus, который стал ее первым партнером. Так, например, можно будет смотреть спортивные состязания с дополнительным контентом на виртуальном экране.

Игры

В первый день, когда Apple Vision Pro выйдет в продажу, пользователи смогут сыграть в «более чем сто» игр в Apple Arcade — игровом сервисе компании, доступном по подписке на iPhone, iPad и Mac.

Apple just unveiled its new mixed-reality headset — Apple Vision Pro.

It will allow users to access multi-view broadcasts, massive gaming displays, and immersive replays. pic.twitter.com/bEt2gdXfKE

— Front Office Sports (@FOS) June 5, 2023

Для игры в шлеме, как и с помощью телевизора, понадобится контроллер — подойдет и от Xbox, и от PlayStation. На презентации Apple пообещала еще больше развивать гейминг на новом для себя устройстве.

Вам может быть интересно: главные новости Нью-Йорка, истории наших иммигрантов и полезные советы о жизни в Большом Яблоке – читайте все это на ForumDaily New York.

Так, компания объявила о партнерстве с компанией Unity (она разработала одноименный игровой движок) — и переносе приложений на его базе с полным доступом к операционной системе (visionOS), рендерингу и встроенным жестам.

Дорогая игрушка

Гарнитура смешанной реальности от Apple обойдется в $3499. В такую цену устройство будет продаваться в США.

В Соединенных Штатах Apple Vision Pro выйдет «в начале 2024 года». Вероятнее всего, желающим воспользоваться шлемом в других странах придется ждать еще дольше.

Сообщение Apple презентовала шлем смешанной реальности: он наложит цифровой мир на вашу жизнь появились сначала на ForumDaily.