С выпуском visionOS 2 в сентябре 2024 года visionOS 1 больше не является последней основной версией операционной системы Apple для Vision Pro. Хотя Apple может продолжать выпускать незначительные обновления безопасности для visionOS 1 для пользователей, которые не хотят немедленно обновляться, данная сводка больше не обновляется.

visionOS — это новая операционная система, разработанная для гарнитуры Apple Vision Pro для дополненной и виртуальной реальности, или, как называет ее Apple, устройства пространственных вычислений. С помощью visionOS Apple предоставляет полноценный трехмерный интерфейс, который начинается с главного экрана, похожего на главный экран iPhone. Он отображает все приложения, установленные на Apple Vision Pro, причем интерфейс visionOS способен динамически реагировать на естественный свет и тени, помогая пользователям определять расстояние и масштаб.

Навигация в visionOS осуществляется с помощью движений глаз, жестов рук и голосовых команд, поскольку прямое взаимодействие невозможно. Например, пользователи могут просматривать приложения, глядя на них, а затем выбирать одно касанием пальцев. Эта схема навигации была описана как естественная и интуитивно понятная теми, кто смог протестировать Apple Vision Pro.

Приложения visionOS могут быть размещены в любом месте виртуального пространства, видимого пользователю, и их размеры могут быть изменены до сверхбольших или сверхмалых. Окна приложений могут располагаться друг над другом, группироваться в комнате и изменять размеры. Одновременно может работать несколько приложений, и неясно, существует ли верхний предел, выходящий за рамки того, что помещается в визуальном пространстве. Apple описывает visionOS как предлагающую бесконечный холст, но пользователи также могут выбрать фокусировку на одном приложении, которое полностью занимает пространство.

Уровень погружения в visionOS регулируется. Пользователи могут видеть свой контент в реальном окружении через камеры Apple Vision Pro, или виртуальное «Окружение» может заставить реальный мир исчезнуть. Apple разработала несколько Окружений, таких как Маунт-Худ, которые могут быть активированы в качестве фона в visionOS.

Apple адаптировала существующие приложения, такие как FaceTime, Photos, Messages, Safari и другие, для работы в трехмерной среде. Например, в «Фото» изображения можно просматривать в увеличенном виде, а панорамы обволакивают пользователя. В FaceTime полноразмерные плитки для каждого человека могут располагаться по комнате. Для пользователя гарнитуры visionOS создает «Персону», или цифровую репрезентацию, отражающую движения лица и рук в реальном времени. В «Сообщениях», Safari и других приложениях пользователи могут вытягивать трехмерные файлы USDZ для просмотра и манипулирования виртуальными объектами.

С такими контентными приложениями, как Apple TV+, visionOS может отображать телешоу и фильмы на персональном экране кинотеатра, который ощущается как 100 футов в ширину, а visionOS предлагает Apple Immersive Videos — записи с разрешением 180 градусов и высоким разрешением. visionOS поддерживает пространственное аудио через динамики Apple Vision Pro.

Существует специальный App Store для visionOS, где представлены приложения и контент от разработчиков. Он также предоставляет тысячи приложений для iPhone и iPad, которые автоматически работают в visionOS и адаптированы для управления глазами и руками. С помощью iCloud контент синхронизируется с iPhone, iPad и Mac.

Bluetooth-аксессуары, такие как клавиатуры, трекпады и игровые контроллеры, работают с visionOS, а также интегрируются с Mac, позволяя Apple Vision Pro служить дисплеем для Mac. Экран Mac отображается в виртуальном пространстве, предоставляемом visionOS, для частного, портативного дисплея 4K.

Для безопасности и аутентификации visionOS поддерживает Optic ID — функцию сканирования радужной оболочки глаза, которая работает аналогично Touch ID или Face ID. Optic ID может использоваться для входа в visionOS, совершения покупок и входа на веб-сайты.

visionOS вышла в пятницу, 2 февраля, в официальную дату запуска гарнитуры Vision Pro.

Примечание: Вы обнаружили ошибку в этой сводке или хотите оставить отзыв? Отправьте нам письмо здесь.

Текущая версия visionOS — visionOS 1.3, выпущенная в июле. visionOS 1.3 добавила улучшения безопасности, но никаких новых функций.

visionOS — это операционная система, разработанная с нуля для Apple Vision Pro, и это первая ОС пространственных вычислений от Apple. Она отличается от всего, что мы видели раньше, потому что она предназначена для использования в виртуальном пространстве, но в то же время напоминает iOS. По сути, она переносит цифровой контент в ваше физическое пространство.

Существует главный экран, похожий на iOS, который служит основным хабом и эквивалентен главному экрану. Именно здесь вы получаете доступ ко всему контенту, доступному на Vision Pro, включая установленные вами приложения.

Программное обеспечение работает через приложения, как и в macOS и iOS. Поэтому, если вы хотите посмотреть фильм, сыграть в игру или поработать, вам нужно открыть соответствующее приложение. Это совершенно новый опыт, но он знаком пользователям iPhone и iPad.

visionOS имеет полноценный трехмерный интерфейс, и все значки приложений, окна и другие объекты динамически реагируют на естественный свет и тени, помогая вам определить расстояние и масштаб виртуальных элементов в комнате.

Окна приложений

Приложения открываются так же, как и на Mac, и у вас есть настраиваемое окно приложения, которое вы можете разместить в любом месте вокруг себя. Вы можете делать окна большими или маленькими и иметь столько открытых окон, сколько хотите вокруг себя.

У вас есть «бесконечный холст» для работы, как говорит Apple, потому что все пространство вокруг вас находится в вашем распоряжении. Приложения могут располагаться прямо перед вашим лицом, отодвигаться дальше в комнату, располагаться друг над другом или распределяться по комнате.

Одно приложение может занимать всю область перед вами, если вы хотите сосредоточиться на одном действии, например, на медитации.

Окружения

Камеры Apple предназначены для отображения вашего окружения, чтобы вы могли размещать приложения и другие цифровые объекты в комнате вокруг вас. Однако с помощью Digital Crown вы можете быть перенесены в полностью виртуальное пространство, которое блокирует внешний мир.

Вращение Digital Crown регулирует ваш уровень погружения, активируя то, что Apple называет «Окружениями». Окружения — это виртуальные фоны, которые переносят вас в другое место, например, на гору Худ. Apple описывает их как полноценные, трехмерные места, которые заставляют реальный мир исчезнуть.

Доступные Окружения включают Халеакала, Йосемити, Небо, Джошуа-Три, Озеро Врангла, Маунт-Худ, Луна, Пляж, Уайт-Сэндс, Зимний свет, Осенний свет, Летний свет и Весенний свет. Некоторые из Окружений имеют режимы дня и ночи, а также динамические элементы, такие как отражающая вода. Сторонние приложения также могут создавать пользовательские окружения для своего контента.

Демонстрация экрана через AirPlay

Контент, отображаемый на Apple Vision Pro, может быть отражен на iPhone, iPad, Mac, Apple TV или совместимом с AirPlay смарт-телевизоре с использованием AirPlay. Контент может быть отражен на любое устройство с поддержкой AirPlay с разрешением до 720p, что позволяет пользователю показывать другим, что отображается на гарнитуре.

Персоны

Поскольку Vision Pro носится на голове пользователя и не может захватывать пользователя через фронтальную камеру для видеозвонков и других целей, Apple разработала Персоны.

Персоны — это цифровая репрезентация пользователя Vision Pro, с 3D-сканом, полученным с помощью гарнитуры Vision Pro, когда она не носится. Персоны отражают мимику и движения рук в реальном времени, хотя некоторые пользователи считают их немного жутковатыми из-за эффекта «зловещей долины». Персоны в основном используются в FaceTime и других видеозвонках.

В апреле 2024 года Apple выпустила Spatial Personas в бета-версии. Spatial Personas — это версия функции Персоны, которая не ограничена плиткой.

При использовании Spatial Personas имеется полупрозрачный фон и визуальное отображение рук, что позволяет пользователям чувствовать, будто они находятся в одном физическом пространстве. Использование Spatial Personas требует visionOS 1.1 или новее.

Управление visionOS осуществляется с помощью движений глаз, жестов рук и голосовых команд. Вы просто смотрите на объект, чтобы выделить его, а затем используете жест для взаимодействия с ним. Доступные варианты жестов перечислены ниже.

• Касание (Tap) — одновременное сведение большого и указательного пальцев сигнализирует гарнитуре о том, что вы хотите нажать на виртуальный элемент на дисплее, на который вы смотрите. Пользователи также описывают это как «щипок», и это эквивалентно нажатию на экран iPhone.
• Двойное касание (Double Tap) — двойное касание инициирует жест двойного касания.
• Щипок и удержание (Pinch and Hold) — щипок и удержание похож на жест касания и удержания и выполняет такие действия, как выделение текста.
• Щипок и перетаскивание (Pinch and Drag) — щипок и перетаскивание можно использовать для прокрутки и перемещения окон. Вы можете прокручивать горизонтально или вертикально, и если вы переместите руку быстрее, вы сможете прокручивать быстрее.
• Масштабирование (Zoom) — масштабирование — это один из двух основных двухручных жестов. Вы можете свести пальцы вместе и развести руки, чтобы увеличить масштаб, а уменьшение масштаба выполняется движением сведения рук. Размеры окон также можно регулировать, перетаскивая за углы.
• Поворот (Rotate) — поворот — это другой двухручный жест, и, согласно диаграмме Apple, он включает в себя сведение пальцев и вращение рук для манипулирования виртуальными объектами.

Жесты работают в сочетании с движениями глаз, а многочисленные камеры в Vision Pro с высокой точностью отслеживают, куда вы смотрите. Положение глаз является ключевым фактором при нацеливании на объект, с которым вы хотите взаимодействовать с помощью жестов рук. Например, взгляд на значок приложения или элемент на экране нацеливает на него и выделяет его, а затем вы можете выполнить жест.

Жесты рук не должны быть размашистыми, и вы можете держать руки на коленях. Apple даже поощряет это, поскольку это предотвращает усталость рук и плеч от удержания в воздухе. Вам нужен лишь небольшой жест щипка для эквивалента касания, поскольку камеры могут отслеживать точные движения.

То, на что вы смотрите, позволяет выбирать и манипулировать объектами, которые находятся как близко, так и далеко от вас, и Apple предполагает сценарии, когда вы можете захотеть использовать более крупные жесты для управления объектами, которые находятся прямо перед вами. Вы можете протянуть руку и использовать кончики пальцев для взаимодействия с объектом. Например, если окно Safari находится прямо перед вами, вы можете протянуть руку и прокрутить его оттуда, а не использовать пальцы на коленях.

Навигация с помощью глаз и жестов продемонстрирована во вступительных видеороликах, извлеченных из программного обеспечения visionOS. Apple показывает пользователям, как смотреть на системный элемент и выбирать его касанием пальцев. Гарнитура способна распознавать движения рук, даже когда руки находятся в удобном положении.

Разработчики могут создавать собственные жесты для использования с visionOS в своих приложениях, а также существуют специальные возможности для людей с ограниченными возможностями.

Существует также функция набора текста в воздухе, разработанная для того, чтобы вы могли набирать текст на полноразмерной виртуальной клавиатуре. Тактильной обратной связи нет, Apple вместо этого сосредоточилась на визуальной обратной связи при «нажатии» клавиши. Опыт использования виртуальной клавиатуры был описан как «полный провал», который работает плохо. Некоторые рецензенты говорят, что это нормально, в то время как другие выразили разочарование тем, насколько сложно быстро набирать текст.

Устройства ввода

Хотя visionOS предназначена для управления с помощью жестов рук и движений глаз, она поддерживает Bluetooth-мыши, клавиатуры и трекпады, а также игровые контроллеры для игр.

Мыши, клавиатуры и трекпады можно использовать вместе с Mac.

Apple переосмыслила многие из своих привычных приложений для трехмерного интерфейса, включая FaceTime, Photos, Messages и Safari.

FaceTime представляет особый интерес, поскольку он отображает собеседников в больших плитках по комнате, которые вы можете регулировать. Ваши собеседники видят вашу «Персону» — скан вашего реального лица, который в реальном времени отражает вашу мимику и движения рук, так что вы выглядите как вы сами, а не как человек в гарнитуре. Персоны также могут использоваться в других видеоприложениях.

Приложение «Фото» отображает изображения в увеличенном масштабе, с панорамами, которые обволакивают вас, например, и вы можете просматривать 3D-фотографии и видео. В гарнитуре есть встроенная камера, так что вы можете снимать видео, которое сможете посмотреть в полном 3D.

В «Сообщениях», Safari и других приложениях пользователи могут вытягивать трехмерные файлы USDZ для просмотра и манипулирования виртуальными объектами. Встроенные приложения на Vision Pro перечислены ниже.

Встроенные приложения, оптимизированные для Vision Pro:

• App Store
• Capture
• Encounter Dinosaurs
• FaceTime
• Files
• Freeform
• Keynote
• Mail
• Messages
• Mindfulness
• Music
• Notes
• Photos
• Safari
• Settings
• Tips
• TV

Встроенные приложения, не оптимизированные для Vision Pro:

• Books
• Calendar
• Home
• Maps
• News
• Podcasts
• Reminders
• Shortcuts
• Stocks

Сторонние приложения

App Store для visionOS при запуске предлагал 600 сторонних приложений, оптимизированных для Vision Pro.

• Приложения для Vision Pro, которые стоит посмотреть

Приложения для iPhone и iPad

Существует специальный App Store для visionOS, где вы можете найти приложения, созданные специально для устройства, но он также позволяет загружать существующие приложения для iPhone и iPad. Приложения для iPhone и iPad работают в visionOS в 2D-среде, поэтому вы можете использовать свои любимые приложения, даже если они не обновлены для трехмерного интерфейса.

Развлечения

Apple TV+ и другие стриминговые приложения предлагают разнообразные телешоу и фильмы, которые можно смотреть через гарнитуру. Apple утверждает, что эффект похож на персональный киноэкран шириной 100 футов.



Стриминговые сервисы и спортивные приложения на Vision Pro включают Disney+, ESPN, MLB, PGA Tour, Max, Discovery+, Amazon Prime Video, Paramount+, Peacock, Pluto TV, Tubi, Fubo, Crunchyroll, Red Bull TV, IMAX, TikTok и MUBI, а также Apple TV+.

Другие стриминговые сервисы, такие как Netflix, доступны через Safari или, в некоторых случаях, через приложения для iPad, которые могут работать на Vision Pro. YouTube, Spotify и Netflix ограничены браузером, поскольку разработчики могут отказаться от доступности своих приложений для iPad через App Store Vision Pro.

Некоторые приложения, адаптированные для Vision Pro, имеют уникальные функции. Например, Disney+ позволяет пользователям выбирать фоны в стиле Disney для просмотра контента. Пользователи могут выбирать такие фоны, как Башня Мстителей или Татуин, в качестве своего окружения, а контент воспроизводится на экране поверх фона.

Vision Pro поддерживает как 2D, так и 3D фильмы. Disney+ и другие приложения предлагают отдельные фильмы в 3D и выпускают 3D-версии новых фильмов одновременно или вскоре после выпуска 2D-версий. Более 150 3D-фильмов доступны для покупки через приложение Apple TV на Vision Pro, включая «Аватар: Путь воды», «Дюну», «Человек-паук: Через вселенные» и «Братья Супер Марио в кино».

Иммерсивные впечатления

Приложение Apple TV включает подборку контента, записанного в формате Apple Immersive Video, который предлагает 180-градусные 3D 8K записи, сделанные с пространственным аудио.

• Alicia Keys: Rehearsal Room — дает представление о творческом процессе Алисии Киз через интимную репетицию.
• Adventure — следует за спортсменами-первопроходцами, которые берутся за захватывающие дух испытания в самых сенсационных местах мира.
• Wild Life — позволяет зрителям близко познакомиться с самыми харизматичными существами на планете.
• Prehistoric Planet Immersive — переносит пользователей в повседневную жизнь динозавров.

Игры

visionOS включает поддержку игр Apple Arcade, которые могут работать с подключенным Bluetooth-геймпадом, а Apple сотрудничает с игровыми партнерами для создания новых игровых впечатлений для устройства. Для Vision Pro были созданы избранные «пространственные игры» , включая Game Room, What the Golf? и Super Fruit Ninja.

App Store

Как и другие обновления операционных систем Apple, visionOS имеет свой собственный специальный App Store, где пользователи могут найти сторонние приложения и игры, разработанные для устройства.

Возможная интеграция Apple Pencil

Будущая версия Apple Pencil может работать с Vision Pro, поскольку Apple тестировала версию устройства с интеграцией visionOS. Apple Pencil можно будет использовать с приложениями для рисования Vision Pro, такими как Freeform и Pixelmator.

Неизвестно, как Apple Pencil будет работать с Vision Pro, но возможно, что пользователи смогут рисовать с помощью Apple Pencil на плоской поверхности, и рисунок будет отображаться в приложении visionOS.

Визуальный поиск

visionOS включает функцию визуального поиска, которая может использоваться для получения информации об объекте, обнаружения и взаимодействия с текстом в окружающем мире, копирования и вставки печатного текста из реального мира в приложения, перевода текста между 17 различными языками и многого другого.

Реальный текст, содержащий контактную информацию, веб-сайты, информацию о конвертации единиц измерения и аналогичную информацию, может быть использован в visionOS. Например, если на печатном раздаточном материале есть ссылка на веб-сайт, вы можете просканировать ссылку с помощью Vision Pro, открыв окно Safari для просмотра веб-сайта. Или, если в рецепте указаны граммы, а вам нужны унции, вы можете выполнить преобразование с помощью гарнитуры.

Перевод текста в реальном времени также полезен во время путешествий и в других случаях, когда вам может понадобиться быстро перевести то, что вы видите в реальном мире. Гарнитура Apple Vision Pro способна автоматически обнаруживать текст и документы, подобно тому, как iPhone может обнаруживать текст на фотографиях и позволять с ним взаимодействовать.

Режим путешествий

Режим путешествий можно включить через Центр управления, и он предназначен для стабилизации изображения в Vision Pro для пользователей, находящихся в гарнитуре в самолете.

Гостевой режим

Гостевой режим позволяет членам семьи и друзьям пользователя использовать Vision Pro с ограниченным доступом к некоторым приложениям, таким как Photos и Safari. Учетная запись Apple ID основного пользователя, настройки, Optic ID, пароль, пароли, Apple Pay, Персона и данные о здоровье ограничены во время активного режима гостевого пользователя.

Vision Pro интегрируется с Mac, служа дисплеем для ноутбука или настольного компьютера через функцию под названием Mac Virtual Display. Вы можете видеть все свои приложения Mac в виртуальном пространстве через AirPlay 2, используя клавиатуру и мышь как обычно для выполнения работы.

Обратите внимание, что дисплей можно использовать с Mac mini или Mac Studio, у которых нет собственного дисплея. Дополнительный дисплей не требуется.

При включенном Mac Virtual Display приложения visionOS можно использовать вместе с виртуальным экраном Mac. Сам Vision Pro может быть отражен на Mac через AirPlay или FaceTime.

Похоже, что нет функции для использования приложений Mac по отдельности в смешанной реальности, с отдельными окнами для каждого. Vision Pro просто служит дисплеем для стандартного рабочего стола Mac, поэтому вы можете работать с приложениями только в рамках одного виртуального рабочего стола.

• Ваш Mac и Apple Vision Pro: что вы можете делать (и чего не можете)

Вместо Face ID или Touch ID visionOS использует Optic ID — совершенно новую функцию безопасности для сканирования радужной оболочки глаза. Apple использует инфракрасные огни и камеры внутри гарнитуры для анализа уникального узора вашей радужной оболочки в целях аутентификации.

Optic ID может использоваться для входа в visionOS, совершения покупок и вместо паролей в приложениях и на веб-сайтах.

Apple тестирует следующее поколение visionOS — visionOS 2. Обновление включает более естественно выглядящие Персоны, опции для новых жестов рук для доступа к главному экрану и Центру управления, настройку главного экрана, более широкий Mac Virtual Display и многое другое.

visionOS 2 доступна разработчикам для бета-тестирования в настоящее время, и она будет выпущена осенью. Apple не планирует выпускать публичную бета-версию visionOS 2, и тестирование будет ограничено разработчиками. Для получения дополнительной информации обо всех ожидаемых функциях мы подготовили сводку по visionOS 2.

Vision Pro получит функции Apple Intelligence в будущем, согласно Марку Гурману из Bloomberg. Apple Intelligence будет доступна на гарнитуре, но не в 2024 году, поэтому, возможно, это функция, которую Apple приберегает для visionOS 3 в 2025 году. Vision Pro достаточно мощный, чтобы запускать локальные функции Apple Intelligence, такие как инструменты для написания, сводки уведомлений и обновленный Siri.