С выходом visionOS 2 в сентябре 2024 года, visionOS 1 больше не является самой последней основной версией операционной системы Apple для Vision Pro. Хотя Apple может продолжать выпускать небольшие обновления безопасности для visionOS 1 для пользователей, которые не хотят немедленно обновляться, представленный ниже обзор больше не обновляется.

visionOS — это новая операционная система, разработанная для гарнитуры дополненной и виртуальной реальности Apple Vision Pro или «устройства пространственных вычислений», как называет его Apple. С visionOS Apple предлагает полноценный трехмерный интерфейс, который начинается с Домашнего вида, аналогичного Домашнему экрану iPhone. Он отображает все приложения, установленные на Apple Vision Pro, при этом интерфейс visionOS способен динамически реагировать на естественный свет и тени, чтобы помочь пользователям интерпретировать расстояние и масштаб.

Управление visionOS осуществляется с помощью движений глаз, жестов рук и голосового управления, поскольку прямое взаимодействие с ним невозможно. Пользователи могут, например, просматривать приложения, глядя на них, а затем выбирать нужное касанием пальцев. Эта схема навигации была описана как естественная и интуитивно понятная теми, кто смог протестировать Apple Vision Pro.

Приложения visionOS можно размещать в любом месте виртуального пространства, видимого пользователю, и их размер можно изменять от ультрабольших до маленьких. Окна приложений можно накладывать друг на друга, располагать по комнате и изменять их размер. Несколько приложений могут работать одновременно, и неясно, существует ли верхний предел, кроме того, что помещается в визуальном пространстве. Apple описывает visionOS как систему, предлагающую бесконечное полотно, но пользователи также могут сосредоточиться на одном приложении, которое полностью развернется в пространстве.

Уровень погружения в visionOS регулируется. Пользователи могут либо видеть свой контент в своем реальном окружении через камеры Apple Vision Pro, либо виртуальное «Окружение» может заставить реальный мир исчезнуть. Apple разработала несколько Окружений, таких как гора Худ, которые могут быть активированы в качестве фона в visionOS.

Apple адаптировала существующие приложения, такие как FaceTime, Фото, Сообщения, Safari и другие, для работы в 3D-среде. Например, в Фото изображения можно просматривать в увеличенном размере, а панорамы обволакивают пользователя. В FaceTime полноразмерные плитки для каждого человека могут быть расположены по комнате. Для пользователя гарнитуры visionOS создает Персону, или цифровое представление, которое отражает движения лица и рук в реальном времени. В Сообщениях, Safari и других приложениях пользователи могут извлекать 3D-файлы USDZ для просмотра и манипулирования виртуальными объектами.

С помощью контентных приложений, таких как Apple TV+, visionOS может отображать телешоу и фильмы на персональном киноэкране шириной 100 футов, а также visionOS предлагает иммерсивные видео Apple (Apple Immersive Videos), представляющие собой 180-градусные записи высокого разрешения. visionOS поддерживает пространственное аудио (Spatial Audio) через динамики Apple Vision Pro.

Для visionOS существует специализированный App Store, который содержит приложения и контент от разработчиков. Он также предоставляет тысячи приложений для iPhone и iPad, которые автоматически работают на visionOS и адаптированы для управления глазами и руками. С помощью iCloud контент синхронизируется с iPhone, iPad и Mac.

Аксессуары Bluetooth, такие как клавиатуры, трекпады и игровые контроллеры, работают с visionOS, а также система интегрируется с Mac, позволяя Apple Vision Pro служить дисплеем для Mac. Экран Mac появляется в виртуальном пространстве, предоставляемом visionOS, как частный, портативный 4K-дисплей.

Для безопасности и аутентификации visionOS поддерживает Optic ID, функцию сканирования радужной оболочки глаза, которая работает аналогично Touch ID или Face ID. Optic ID можно использовать для входа в visionOS, совершения покупок и входа на веб-сайты.

visionOS вышла в пятницу, 2 февраля, в официальную дату запуска гарнитуры Vision Pro.

Примечание: Заметили ошибку в этом обзоре или хотите оставить отзыв? Напишите нам по электронной почте здесь.

Текущая версия visionOS — visionOS 1.3, выпущенная в июле. visionOS 1.3 добавила улучшения безопасности, но не внесла новых функций.

visionOS — это операционная система, созданная с нуля для Apple Vision Pro, и это первая операционная система Apple для пространственных вычислений. Она не похожа ни на что, что мы видели раньше, поскольку предназначена для использования в виртуальном пространстве, но в то же время напоминает iOS. По сути, она переносит цифровой контент в ваше физическое пространство.

Существует Домашний вид, похожий на iOS, который служит главным центром и аналогичен Домашнему экрану. Это место, куда вы переходите для доступа ко всему контенту, доступному на Vision Pro, включая установленные вами приложения.

Программное обеспечение работает через приложения, как на macOS и iOS. Так что, если вы хотите посмотреть фильм, поиграть в игру или поработать, вам нужно открыть соответствующее приложение. Это совершенно новый опыт, но он знаком пользователям iPhone и iPad.

visionOS обладает полноценным трехмерным интерфейсом, и все значки приложений, окна и другие объекты динамически реагируют на естественный свет и тени, чтобы помочь вам определить расстояние и масштаб виртуальных элементов в комнате.

Окна приложений

Приложения открываются так же, как на Mac, и у вас есть регулируемое окно приложения, которое вы можете расположить в любом месте вокруг себя. Вы можете делать окна большими или маленькими и открывать столько окон, сколько захотите.

По сути, у вас есть «бесконечное полотно» для работы, как выражается Apple, потому что все пространство вокруг вас находится в вашем распоряжении. Приложения могут находиться прямо перед вашим лицом, отодвигаться дальше в комнату, располагаться друг на друге или распределяться по комнате.

Одно приложение может заполнить всю область перед вами, если вы хотите сосредоточиться на одном занятии, например, медитации.

Окружения

Камеры Apple предназначены для отображения вашего окружения, чтобы вы могли размещать приложения и другие цифровые объекты в комнате вокруг вас. Однако с помощью Digital Crown вы можете перенестись в полностью виртуальное пространство, которое изолирует вас от реального мира.

Поворот Digital Crown регулирует ваш уровень погружения, активируя то, что Apple называет «Окружениями». Окружения — это виртуальные фоны, которые переносят вас в другое место, например, на гору Худ. Apple описала их как полноценные, похожие на 3D-места, которые заставляют реальный мир исчезнуть.

Доступные окружения включают Халеакала, Йосемити, Небо, Джошуа-Три, Озеро Врангла, Гору Худ, Луну, Пляж, Белые Пески, Зимний Свет, Осенний Свет, Летний Свет и Весенний Свет. Некоторые из окружений имеют как дневной, так и ночной режимы, а также динамические элементы, такие как отражающая вода. Сторонние приложения также могут создавать пользовательские окружения для своего контента.

Совместное использование экрана через AirPlay

Контент, отображаемый на Apple Vision Pro, можно зеркалировать на iPhone, iPad, Mac, Apple TV или смарт-телевизор, совместимый с AirPlay, используя AirPlay. Контент может быть зеркалирован на любое устройство с поддержкой AirPlay с разрешением до 720p, что позволяет пользователю гарнитуры показывать другим, что отображается на ней.

Персоны

Поскольку Vision Pro носится на голове пользователя и не может захватывать изображение пользователя через внешнюю камеру для видеозвонков и других целей, Apple разработала Персоны.

Персоны — это цифровое представление пользователя Vision Pro, созданное путем 3D-сканирования с использованием гарнитуры Vision Pro, когда она не носится. Персоны отражают выражения лица и движения рук в реальном времени, хотя некоторые пользователи нашли их немного жутковатыми из-за эффекта «зловещей долины». Персоны в основном используются в FaceTime и других видеозвонках.

В апреле 2024 года Apple выпустила пространственные персоны (Spatial Personas) в бета-версии. Пространственные персоны — это версия функции «Персоны», которая не ограничена плиткой.

С помощью пространственных персон создается полупрозрачный фон и визуализация рук, что позволяет пользователям чувствовать себя так, как будто они находятся в одном и том же физическом пространстве. Использование пространственных персон требует visionOS 1.1 или более поздней версии.

Управление visionOS осуществляется с помощью движений глаз, жестов рук и голосовых команд. По сути, вы смотрите на что-либо, чтобы выделить это, а затем используете жест для взаимодействия с этим. Доступные варианты жестов перечислены ниже.

• Касание (Tap) — Соединение большого и указательного пальцев сигнализирует гарнитуре о том, что вы хотите коснуться виртуального элемента на дисплее, на который смотрите. Пользователи также описывали это как щипок, и это эквивалентно касанию экрана iPhone.
• Двойное касание (Double Tap) — Двойное касание инициирует жест двойного касания.
• Щипок и удержание (Pinch and Hold) — Щипок и удержание аналогичны жесту касания и удержания и выполняют такие действия, как выделение текста.
• Щипок и перетаскивание (Pinch and Drag) — Щипок и перетаскивание могут использоваться для прокрутки и перемещения окон. Вы можете прокручивать по горизонтали или вертикали, и если вы будете двигать рукой быстрее, то сможете прокручивать быстрее.
• Масштабирование (Zoom) — Масштабирование — это один из двух основных жестов двумя руками. Вы можете соединить пальцы и раздвинуть руки, чтобы увеличить масштаб, а уменьшение масштаба представляет собой движение, при котором руки сводятся вместе. Размеры окон также можно регулировать, перетаскивая их за углы.
• Вращение (Rotate) — Вращение — это другой жест двумя руками, и согласно схеме Apple, он включает соединение пальцев вместе и вращение рук для манипулирования виртуальными объектами.

Жесты работают в тандеме с движениями глаз, и множество камер в Vision Pro отслеживают, куда вы смотрите, с высокой точностью. Положение глаз является ключевым фактором при выборе объекта, с которым вы хотите взаимодействовать с помощью жестов рук. Например, взгляд на значок приложения или элемент на экране нацеливает на него и выделяет его, а затем вы можете выполнить жест.

Жесты рук не обязательно должны быть широкими, и вы можете держать руки на коленях. Apple, на самом деле, поощряет это, потому что это предотвращает усталость рук и предплечий от держания их в воздухе. Вам нужен лишь небольшой жест щипка для эквивалента касания, потому что камеры могут отслеживать точные движения.

То, на что вы смотрите, позволяет вам выбирать и манипулировать объектами, находящимися как близко, так и далеко от вас, и Apple действительно предвидит сценарии, когда вы можете захотеть использовать более крупные жесты для управления объектами, находящимися прямо перед вами. Вы можете протянуть руку и использовать кончики пальцев для взаимодействия с объектом. Например, если у вас есть окно Safari прямо перед вами, вы можете протянуть руку и прокручивать оттуда, вместо того чтобы использовать пальцы на коленях.

Навигация с помощью глаз и жестов демонстрируется в обучающих видеороликах, извлеченных из программного обеспечения visionOS. Apple показывает пользователям, как смотреть на системный элемент и выбирать его касанием пальцев. Гарнитура способна распознавать движения рук, даже когда руки находятся в удобном положении.

Разработчики могут создавать пользовательские жесты для использования с visionOS в своих приложениях, а также предусмотрены функции доступности.

Также имеется функция ввода в воздухе, которая позволяет печатать на полноценной виртуальной клавиатуре. Тактильная обратная связь отсутствует, вместо этого Apple сосредоточилась на визуальной обратной связи при «нажатии» клавиши. Опыт использования виртуальной клавиатуры был описан как «полный провал», который работает плохо. Некоторые обозреватели говорили, что это нормально, в то время как другие выражали разочарование тем, как трудно быстро печатать.

Устройства ввода

Хотя visionOS предназначена для управления жестами рук и движениями глаз, она поддерживает Bluetooth-мыши, клавиатуры и трекпады, а также игровые контроллеры для игр.

Мыши, клавиатуры и трекпады могут использоваться совместно с Mac.

Apple переосмыслила многие свои привычные приложения для 3D-интерфейса, включая FaceTime, Фото, Сообщения и Safari.

Особый интерес представляет FaceTime, поскольку он отображает собеседников в больших плитках по комнате, которые можно регулировать. Люди, с которыми вы общаетесь, видят вашу «Персону» — сканирование вашего настоящего лица, которое отражает ваши мимические выражения и движения рук в реальном времени, чтобы вы выглядели как вы сами, а не как человек в гарнитуре. Персоны также могут использоваться в других видеоприложениях.

Приложение «Фото» показывает изображения в масштабе больше, чем в жизни, например, с панорамами, обволакивающими вас, плюс вы можете просматривать 3D-фотографии и видео. На гарнитуре есть встроенная камера, так что вы можете снимать видео, которое сможете просматривать в полном 3D.

В «Сообщениях», Safari и других приложениях пользователи могут извлекать 3D-файлы USDZ для просмотра и манипулирования виртуальными объектами. Встроенные приложения на Vision Pro перечислены ниже.

Предустановленные приложения, оптимизированные для Vision Pro:

• App Store
• Capture
• Encounter Dinosaurs
• FaceTime
• Файлы
• Freeform
• Keynote
• Почта
• Сообщения
• Осознанность
• Музыка
• Заметки
• Фото
• Safari
• Настройки
• Советы
• TV

Предустановленные приложения, не оптимизированные для Vision Pro:

• Книги
• Календарь
• Дом
• Карты
• Новости
• Подкасты
• Напоминания
• Команды
• Акции

Сторонние приложения

App Store для visionOS был запущен с 600 сторонними приложениями, оптимизированными для Vision Pro.

• Приложения Vision Pro, на которые стоит обратить внимание

Приложения для iPhone и iPad

Существует специальный App Store для visionOS, где вы можете найти приложения, созданные специально для устройства, но он также позволяет загружать существующие приложения для iPhone и iPad. Приложения для iPhone и iPad работают на visionOS в 2D-среде, поэтому вы можете использовать свои любимые приложения, даже если они не обновлены для 3D-интерфейса.

Развлечения

Apple TV+ и другие потоковые приложения предоставляют разнообразные телешоу и фильмы, которые можно смотреть через гарнитуру. Apple утверждает, что эффект напоминает персональный киноэкран шириной 100 футов.



Потоковые сервисы и спортивные приложения на Vision Pro включают Disney+, ESPN, MLB, PGA Tour, Max, Discovery+, Amazon Prime Video, Paramount+, Peacock, Pluto TV, Tubi, Fubo, Crunchyroll, Red Bull TV, IMAX, TikTok и MUBI, а также Apple TV+.

К другим потоковым сервисам, таким как Netflix, можно получить доступ через Safari или, в некоторых случаях, через приложения для iPad, которые могут работать на Vision Pro. YouTube, Spotify и Netflix ограничены браузером, поскольку разработчики могут отказаться от доступа к своим приложениям для iPad через App Store для Vision Pro.

Некоторые приложения, адаптированные для Vision Pro, обладают уникальными функциями. Например, Disney+ позволяет пользователям выбирать фоны в тематике Disney для просмотра контента. Пользователи могут выбирать такие фоны, как Башня Мстителей или Татуин, в качестве своей обстановки, при этом контент воспроизводится на экране поверх фона.

Vision Pro поддерживает как 2D, так и 3D фильмы. Disney+ и другие приложения предлагают избранные фильмы в 3D и выпускают 3D-версии новых фильмов одновременно или вскоре после 2D-релизов. Более 150 3D-фильмов доступны для покупки через приложение Apple TV на Vision Pro, включая «Аватар: Путь воды», «Дюна», «Человек-паук: Через вселенные» и «Супербратья Марио в кино».

Иммерсивные возможности

Приложение Apple TV включает подборку контента, записанного в формате Apple Immersive Video, который предлагает 180-градусные 3D 8K записи с пространственным звуком.

• Алиша Киз: Репетиционная комната (Alicia Keys: Rehearsal Room) — Дает представление о творческом процессе Алиши Киз через интимную репетиционную сессию.
• Приключение (Adventure) — Следует за новаторскими спортсменами, которые принимают впечатляющие вызовы в самых сенсационных местах мира.
• Дикая природа (Wild Life) — Позволяет зрителям близко познакомиться с одними из самых харизматичных существ на планете.
• Иммерсивная Доисторическая планета (Prehistoric Planet Immersive) — Переносит пользователей в повседневную жизнь динозавров.

Игры

visionOS включает поддержку игр Apple Arcade, которые могут работать с подключенным Bluetooth-игровым контроллером, а также Apple работает с игровыми партнерами над созданием новых игровых впечатлений для устройства. Избранные «пространственные игры» были созданы для Vision Pro, включая Game Room, What the Golf? и Super Fruit Ninja.

App Store

Как и другие обновления операционных систем Apple, visionOS имеет собственный специализированный App Store, где пользователи могут находить сторонние приложения и игры, разработанные для устройства.

Возможная интеграция с Apple Pencil

Будущая версия Apple Pencil может работать с Vision Pro, так как Apple тестировала версию устройства с интеграцией visionOS. Apple Pencil можно будет использовать с приложениями для рисования Vision Pro, такими как Freeform и Pixelmator.

Как Apple Pencil будет работать с Vision Pro, пока неизвестно, но возможно, пользователи смогут рисовать Apple Pencil на плоской поверхности, при этом рисунок будет отображаться в приложении visionOS.

Визуальный поиск

visionOS включает функцию визуального поиска, которую можно использовать для получения информации о предмете, обнаружения текста и взаимодействия с ним в окружающем мире, копирования и вставки печатного текста из реального мира в приложения, перевода текста между 17 различными языками и многого другого.

С реальным текстом, который включает контактную информацию, веб-страницы, конвертацию единиц измерения и подобную информацию, можно взаимодействовать в visionOS. Например, если в распечатанном материале есть ссылка на веб-сайт, вы можете отсканировать ссылку с помощью Vision Pro, открыв окно Safari для просмотра веб-сайта. Или, если в рецепте указаны граммы, а вам нужны унции, вы можете конвертировать их с помощью гарнитуры.

Перевод текста в реальном времени также полезен для путешествий и других случаев, когда вы хотите быстро перевести то, что видите в реальном мире. Гарнитура Apple Vision Pro способна автоматически распознавать текст и документы, аналогично тому, как iPhone может распознавать текст на фотографиях и взаимодействовать с ним.

Режим путешествия

Режим путешествия можно включить через Центр управления, и он предназначен для стабилизации изображения на Vision Pro для пользователей, использующих гарнитуру в самолете.

Гостевой режим

Гостевой режим позволяет семье и друзьям пользователя использовать Vision Pro с ограниченным доступом к определенным приложениям, таким как «Фото» и Safari. Учетная запись Apple ID основного пользователя, настройки, Optic ID, код-пароль, пароли, Apple Pay, Персона и данные о здоровье ограничены, пока активен режим гостевого пользователя.

Vision Pro интегрируется с Mac, выступая в качестве дисплея для ноутбука или настольного компьютера через функцию под названием Mac Virtual Display. Вы можете видеть все свои приложения Mac в виртуальном пространстве через AirPlay 2, используя клавиатуру и мышь как обычно для работы.

Обратите внимание, что вы можете использовать дисплей с Mac mini или Mac Studio, у которых нет собственного дисплея. Дополнительный дисплей не требуется.

При включенном Mac Virtual Display приложения visionOS могут использоваться параллельно с виртуальным экраном Mac. Сама Vision Pro может быть зеркалирована на Mac через AirPlay или FaceTime.

Похоже, нет функции для использования приложений Mac по отдельности в рабочем пространстве смешанной реальности, с отдельными окнами для каждого. Vision Pro просто служит дисплеем для стандартного рабочего стола Mac, поэтому вы можете работать с приложениями только в рамках одного виртуального рабочего стола.

• Ваш Mac и Apple Vision Pro: что вы можете делать (и что не можете)

Вместо Face ID или Touch ID, visionOS использует Optic ID — совершенно новую функцию безопасности, основанную на сканировании радужной оболочки глаза. Apple использует инфракрасные огни и камеры внутри гарнитуры для изучения уникального рисунка вашей радужной оболочки в целях аутентификации.

Optic ID можно использовать для входа в visionOS, совершения покупок и вместо паролей в приложениях и на веб-сайтах.

Apple тестирует следующее поколение visionOS — visionOS 2. Обновление включает в себя более естественно выглядящие персоны, новые жесты для доступа к Домашнему виду и Центру управления, настройку Домашнего вида, более обширный виртуальный дисплей Mac и многое другое.

В настоящее время visionOS 2 доступна разработчикам для бета-тестирования и будет выпущена осенью. Apple не планирует выпускать публичную бета-версию visionOS 2, и тестирование будет ограничено разработчиками. Более подробную информацию обо всех ожидаемых функциях вы можете найти в нашем обзоре visionOS 2.

Vision Pro, по словам Марка Гурмана из Bloomberg, в будущем получит функции Apple Intelligence. Apple Intelligence появится на гарнитуре, но не в 2024 году, так что это может быть функция, которую Apple приберегает для visionOS 3 в 2025 году. Vision Pro достаточно мощна, чтобы запускать встроенные функции Apple Intelligence, такие как инструменты для письма, сводки уведомлений и обновленная Siri.