visionOS 2 — это второе поколение visionOS, операционной системы, которая работает на гарнитуре Vision Pro. visionOS отличается полностью трехмерным интерфейсом, который начинается с главного экрана, похожего на главный экран iPhone. На нем отображаются все приложения, установленные на Apple Vision Pro, а интерфейс visionOS способен динамически реагировать на естественное освещение и тени, помогая пользователям интерпретировать расстояние и масштаб.

В visionOS навигация осуществляется с помощью движений глаз, жестов рук и голосовых команд, поскольку прямое взаимодействие невозможно. Пользователи могут, например, просматривать приложения, просто смотря на них, а затем выбрать одно касанием пальцев. Эта схема навигации была описана пользователями Vision Pro как естественная и интуитивно понятная. В visionOS 2 появились новые жесты, которые можно использовать для быстрого доступа к главному экрану, управления громкостью, проверки уровня заряда батареи и открытия Центра управления для доступа к часто используемым функциям.

Приложения visionOS могут быть размещены в любом месте виртуального пространства, видимого пользователю, и их можно изменять по размеру, делая их очень большими или маленькими. Окна приложений могут располагаться друг над другом, располагаться вокруг комнаты и изменять размер. Одновременно может работать несколько приложений, и неясно, существует ли верхний предел, кроме того, что помещается в визуальное пространство. Apple описывает visionOS как предлагающую бесконечное пространство, но пользователи также могут выбрать фокусировку на одном приложении, которое полностью расширяется в пространстве.

В visionOS 2 впервые появилась возможность персонализировать главный экран, перемещая приложения. С помощью простого жеста «щипок и удержание» приложения можно переупорядочить, чтобы разместить наиболее часто используемые на главном экране приложений.

Уровень погружения в visionOS регулируется. Пользователи могут видеть свой контент в реальном окружении с помощью камер Apple Vision Pro, или виртуальное «Окружение» может привести к тому, что реальный мир исчезнет. Apple разработала несколько Окружений, таких как Маунт-Худ, которые можно активировать в качестве фона в visionOS, и в visionOS 2 появились новые Окружения, такие как Бора-Бора.

Apple изменила Окружения, чтобы вы могли видеть свою Magic Keyboard или клавиатуру MacBook во время погружения в visionOS 2, а Окружения были добавлены в Safari. Вы можете расширять видео, которые встречаете при просмотре веб-страниц, просматривая их в полноэкранном режиме в специальном окружении. Это работает со встроенными видео с YouTube, Netflix и других сервисов.

Apple адаптировала существующие приложения, такие как FaceTime, Photos, Messages, Safari и другие, для работы в трехмерной среде. В Messages, Safari и других приложениях пользователи могут извлекать трехмерные файлы USDZ для просмотра и манипулирования виртуальными объектами, а в Photos панорамы, такие как панорамы, обхватывают пользователя.

Для пользователя гарнитуры visionOS создает Персону — цифровую репрезентацию, отражающую движения лица и рук в реальном времени. Персона используется в FaceTime и других видеоприложениях. В visionOS 2 Apple улучшила Персоны, добавив более точные оттенки кожи и более яркие цвета одежды, а также вы можете добавить разнообразные фоны, и появились более плавные и естественные анимации движений рук.

В visionOS 2 Apple добавила интересную функцию, позволяющую создавать трехмерные пространственные фотографии из двухмерных изображений в вашей библиотеке. Эта функция использует информацию о глубине и машинное обучение для добавления естественно выглядящей глубины и объема. Apple переработала приложение Photos, сделав его более удобным для поиска нужного контента, а также добавила опцию SharePlay для Photos, чтобы вы могли видеть фотографии, видео и панорамы в натуральную величину и переживать воспоминания, когда все в FaceTime используют Vision Pro.

С такими приложениями, как Apple TV+, visionOS может отображать телешоу и фильмы на персональном экране кинотеатра, который кажется шириной 100 футов, а visionOS предлагает Apple Immersive Videos — записи с разрешением 180 градусов высокого разрешения. visionOS поддерживает Spatial Audio через динамики Apple Vision Pro. Для любителей спорта visionOS 2 поддерживает Multiview для игр MLS и MLB, позволяя смотреть до пяти игр одновременно.

Существует специальный App Store для visionOS, в котором представлены приложения и контент от разработчиков. Он также предоставляет тысячи приложений для iPhone и iPad, которые автоматически работают на visionOS и адаптированы к управлению глазами и руками. С помощью iCloud контент синхронизируется с iPhone, iPad и Mac.

Bluetooth-аксессуары, такие как клавиатуры, трекпады и игровые контроллеры, работают с visionOS, а Apple добавила поддержку мышей в visionOS 2, так что Bluetooth-мышь можно использовать для навигации во время ношения гарнитуры.

visionOS интегрируется с Mac, позволяя Apple Vision Pro служить дисплеем для Mac. Экран Mac отображается в виртуальном пространстве, предоставляемом visionOS, для приватного, портативного дисплея 4K, и он расширяется в visionOS 2. В visionOS 2.2 виртуальный дисплей Mac имеет больший ультраширокий экран, который, по словам Apple, эквивалентен двум дисплеям 5K, расположенным рядом.

Для безопасности и аутентификации visionOS поддерживает Optic ID — функцию сканирования радужной оболочки глаза, которая работает как Touch ID или Face ID. Optic ID можно использовать для входа в visionOS, совершения покупок и входа на веб-сайты.

Режим путешествия в visionOS стабилизирует изображение для пользователей Vision Pro в самолетах, а в visionOS 2 также появился режим путешествия для поездов. Режим путешествия предназначен для того, чтобы люди могли работать конфиденциально или смотреть контент во время полета или поездки на поезде.

Apple улучшает режим Гостевого пользователя в visionOS 2, который облегчает совместное использование гарнитуры с другими людьми и демонстрацию ее семье и друзьям. Данные глаз и рук последнего гостя сохраняются в течение 30 дней, поэтому нет необходимости повторять процесс настройки каждый раз, когда гость использует гарнитуру.

Другие новые функции, появившиеся в обновлении visionOS 2, включают возможность диктовки в Сообщениях простым взглядом на значок микрофона, режим AirPlay Receiver для зеркалирования контента с близлежащих iPhone и iPad в той же сети, интеграцию частоты дыхания во время сеанса Mindfulness, а также совместные плейлисты и сессии караоке с друзьями в Apple Music.

Примечание: Нашли ошибку в этом обзоре или хотите оставить отзыв? Напишите нам здесь.

Текущая версия visionOS 2 — visionOS 2.6, выпущенная в июле. visionOS 2.6 — это обновление с исправлениями ошибок, которое также включает важные обновления безопасности.

visionOS — это операционная система, разработанная Apple для гарнитуры Vision Pro, и Apple называет ее первой ОС для пространственных вычислений. Хотя она напоминает iOS, она разработана для использования в виртуальном пространстве. Apple выпустила visionOS в феврале, а visionOS 2 — в сентябре.

visionOS имеет главный экран, похожий на iOS, который служит основным центром, и он сродни домашнему экрану. Это то место, где вы получаете доступ ко всему контенту, доступному на Vision Pro, включая установленные вами приложения. Программное обеспечение доступно через приложения, как и в macOS и iOS. Поэтому, если вы хотите посмотреть фильм, поиграть в игру или выполнить работу, вам нужно открыть соответствующее приложение.

На момент запуска Vision Pro не было возможности настраивать макет главного экрана, но в visionOS 2 вы можете перемещать приложения и настраивать то, что вы видите первым. Чтобы перемещать приложения, просто используйте жест «щипок и удержание».

visionOS отличается полностью трехмерным интерфейсом, и все значки приложений, окна и другие объекты динамически реагируют на естественное освещение и тени, чтобы помочь вам определить расстояние и масштаб виртуальных элементов в комнате.

Окна приложений

Приложения открываются так же, как и на Mac, и у вас есть регулируемое окно приложения, которое вы можете разместить в любом месте вокруг себя. Вы можете делать окна большими или маленькими и иметь сколько угодно открытых окон вокруг вас.

У вас есть «бесконечное пространство» для работы, как говорит Apple, потому что все пространство вокруг вас в вашем распоряжении. Приложения могут быть прямо перед вашим лицом, отодвинуты дальше в комнату, уложены друг на друга или разбросаны по комнате.

Одно приложение может заполнить всю область перед вами, если вы хотите сосредоточиться на одном действии, например, на медитации.

Окружения

Камеры Apple предназначены для того, чтобы показывать вам ваше окружение, позволяя размещать приложения и другие цифровые объекты в комнате вокруг вас. Однако с помощью Digital Crown вы можете включить полномасштабную виртуальную реальность, чтобы заблокировать реальный мир.

Поворот Digital Crown регулирует уровень погружения, активируя то, что Apple называет «Окружениями». Окружения — это виртуальные фоны, которые переносят вас в другое место, например, на Маунт-Худ. Apple описывает их как полные, трехмерные места, которые заставляют реальный мир исчезнуть.

Доступные Окружения включают Бора-Бора (новый в visionOS 2), Халеакала, Йосемити, Небо, Джошуа-Три, Озеро Врангла, Маунт-Худ, Луна, Пляж, Белые Пески, Зимний Свет, Осенний Свет, Летний Свет и Весенний Свет.

С visionOS 2 Apple настроила окружения, чтобы вы могли видеть свою Magic Keyboard или клавиатуру MacBook во время погружения, что облегчает набор текста. Теперь окружения также можно использовать с Safari, так что вы можете расширять видео, которые встречаете при просмотре веб-страниц, и смотреть их в полноэкранном режиме.

Поддержка Окружений Safari работает со встроенными видео с YouTube, Netflix и других сервисов.

Демонстрация экрана через AirPlay

Контент, отображаемый на Apple Vision Pro, может быть зеркалирован на iPhone, iPad, Mac, Apple TV или смарт-телевизор с поддержкой AirPlay с помощью AirPlay. Контент может быть зеркалирован на любое устройство с поддержкой AirPlay с разрешением до 720p, что позволяет носителю показывать другим, что находится на гарнитуре.

Пользователи iPhone и iPad, находящиеся поблизости, могут транслировать контент на Vision Pro через режим AirPlay Receiver, добавленный Apple в visionOS 2.

Персоны

Поскольку Vision Pro носится на голове пользователя и не может захватывать пользователя через фронтальную камеру для видеозвонков и других целей, Apple разработала Персоны.

Персоны — это цифровая репрезентация пользователя Vision Pro, с 3D-сканированием, сделанным с помощью гарнитуры Vision Pro, когда она не надета. Персоны отражают выражения лица и движения рук в реальном времени, и Apple работает над улучшением Персон в течение последних нескольких месяцев. Персоны в основном используются в FaceTime и других видеозвонках.

Персоны раньше были ограничены плиткой, но Пространственные Персоны обеспечивают более естественное ощущение, чтобы у пользователей могло сложиться впечатление, что они находятся в одном физическом пространстве с другим пользователем Vision Pro.

В visionOS 2 Apple улучшила Персоны, добавив более точные оттенки кожи и более яркие варианты цветов одежды, а также появились новые фоны на выбор, а анимация движений рук стала более плавной и естественной.

Apple Intelligence

С visionOS 2.4 Apple добавила поддержку Apple Intelligence на гарнитуре Vision Pro. Функции Apple Intelligence в visionOS включают Инструменты письма для создания, корректуры и обобщения текста, Genmoji для создания пользовательских эмодзи, приложение Image Playground для генерации изображений, Memory Movie для создания пользовательских слайд-шоу, умные ответы, Приоритетные уведомления и Сводки уведомлений, интеграцию Siri с ChatGPT и новые функции Siri, а также Image Wand для добавления изображений в приложение Notes.

Управление visionOS осуществляется с помощью движений глаз, жестов рук и голосовых команд. Вы смотрите на что-то, чтобы выделить это, а затем используете жест для взаимодействия. Доступные варианты жестов перечислены ниже.

• Касание — одновременное касание большого и указательного пальцев сигнализирует гарнитуре, что вы хотите нажать на виртуальный элемент на дисплее, на который вы смотрите. Пользователи также описывали это как «щипок», и это эквивалентно касанию экрана iPhone.
• Двойное касание — двукратное касание инициирует жест двойного касания.
• Щипок и удержание — «щипок и удержание» аналогичен жесту «касание и удержание» и выполняет такие действия, как выделение текста.
• Щипок и перетаскивание — «щипок и перетаскивание» можно использовать для прокрутки и перемещения окон. Вы можете прокручивать горизонтально или вертикально, и если вы двигаете рукой быстрее, вы сможете прокручивать быстрее.
• Масштабирование — масштабирование — один из двух основных жестов двумя руками. Вы можете свести пальцы вместе и развести руки, чтобы увеличить масштаб, а для уменьшения используется движение, похожее на «толкание». Размер окон также можно регулировать, перетаскивая за углы.
• Поворот — поворот — другой жест двумя руками, и, согласно диаграмме Apple, он включает в себя сведение пальцев и вращение рук для манипулирования виртуальными объектами.

В visionOS 2 Apple добавила новые жесты «щипок» и «поворот» для быстрого доступа к главному экрану, открытия Центра управления, управления громкостью и проверки уровня заряда батареи.

Жесты работают вместе с движениями глаз, а многочисленные камеры в Vision Pro с высокой точностью отслеживают, куда вы смотрите. Положение глаз является ключевым фактором при нацеливании на то, с чем вы хотите взаимодействовать с помощью жестов рук. Например, взгляд на значок приложения или элемент на экране нацеливает его и выделяет, а затем вы можете использовать жест.

Жесты рук не должны быть грандиозными, и вы можете держать руки на коленях. Вам нужен только небольшой жест «щипок» для эквивалента касания, поскольку камеры могут отслеживать точные движения.

Существует функция воздушного набора текста, предназначенная для набора текста на полноэкранной виртуальной клавиатуре. Тактильной обратной связи нет, Apple сосредоточилась на визуальной обратной связи при «нажатии» клавиши.

Устройства ввода

Хотя visionOS предназначена для управления с помощью жестов рук и движений глаз, она поддерживает Bluetooth-мыши, клавиатуры и трекпады, а также игровые контроллеры для игр.

Мыши, клавиатуры и трекпады можно использовать вместе с Mac. Обратите внимание, что поддержка мышей была добавлена в visionOS 2.

Apple переработала многие из своих привычных приложений для трехмерного интерфейса, включая FaceTime, Photos, Messages и Safari.

FaceTime в частности представляет интерес, поскольку он отображает собеседников в больших плитках по всей комнате, которые вы можете регулировать. Люди, с которыми вы разговариваете, видят вашу «Персону» — скан вашего реального лица, отражающий ваши выражения лица и движения рук в реальном времени, так что вы выглядите как вы сами, а не как человек в гарнитуре.

Приложение Photos отображает изображения в увеличенном масштабе, с панорамами, обхватывающими вас, например, кроме того, вы можете просматривать 3D-фотографии и видео. В гарнитуре есть встроенная камера, позволяющая снимать видео, которое можно просмотреть в полном 3D.

С visionOS 2 ваши 2D-изображения можно преобразовать в 3D-пространственные фотографии, используя встроенную информацию о глубине и машинное обучение для добавления естественно выглядящего объема, который делает ваши 2D-фотографии намного более реальными на Vision Pro.

Опция SharePlay для Photos позволяет просматривать фотографии, видео и панорамы в натуральную величину, и вы можете переживать воспоминания через FaceTime, если у всех участников есть Vision Pro.

Пользователи Vision Pro могут просматривать пространственные фотографии и видео в Safari начиная с visionOS 2.2, поскольку Apple добавила функцию, позволяющую разработчикам делиться пространственными фотографиями и видео на своих веб-сайтах. Для пользователей, не использующих Vision Pro, изображения и видео выглядят так же, как и сейчас, но они в 3D для пользователей Vision Pro.

В приложении Messages visionOS 2 добавляет функцию диктовки сообщений простым взглядом на значок микрофона, а приложение Mindfulness поддерживает интеграцию с частотой дыхания. Оно может отслеживать частоту дыхания, используя камеры для наблюдения за вашим дыханием.

Apple Music в visionOS 2 поддерживает совместные плейлисты и сессии караоке.

Сторонние приложения

App Store visionOS был запущен с 600 доступными приложениями сторонних разработчиков, оптимизированными для Vision Pro.

Приложения для iPhone и iPad

Существует специальный App Store visionOS, где вы можете найти приложения, созданные специально для устройства, но он также позволяет загружать существующие приложения для iPhone и iPad. Приложения для iPhone и iPad работают на visionOS в 2D-среде, поэтому вы можете использовать свои любимые приложения, даже если они не обновлены для трехмерного интерфейса.

Пространственная галерея

В visionOS 2.4 Apple добавила приложение Spatial Gallery, которое содержит пространственные фотографии, пространственные видео и панорамы от художников, кинематографистов и фотографов.

Apple предлагает широкий спектр контента, включая спорт, культуру, искусство, образ жизни, природу, путешествия и развлечения, и планирует продолжать предлагать дополнительный контент в будущем. Apple заявляет, что планирует предоставлять визуальный контент от ведущих художников, новаторских создателей и мировых брендов.

Иммерсивные впечатления и развлечения

Приложение Apple TV включает в себя выбор контента, записанного в формате Apple Immersive Video, который предлагает 180-градусные 3D-записи 8K, снятые с пространственным звуком.

• Alicia Keys: Rehearsal Room — предоставляет представление о творческом процессе Алишии Киз через интимную репетицию.
• Adventure — следит за спортсменами-первопроходцами, которые принимают на себя вдохновляющие вызовы в самых зрелищных местах мира.
• Wild Life — позволяет зрителям близко познакомиться с самыми харизматичными существами на планете.
• Prehistoric Planet Immersive — переносит пользователей в повседневную жизнь динозавров.

Vision Pro поддерживает 3D-контент фильмов и телешоу от различных поставщиков, с 3D-фильмами, доступными для покупки у Apple или для потоковой передачи через такие сервисы, как Disney+. Контент без 3D можно смотреть на виртуальном дисплее, который может ощущаться так, будто он шириной 100 футов.

Apple добавила функцию Multiview в visionOS 2, специально предназначенную для спорта, и вы можете смотреть до пяти игр MLS и MLB.

Игры

visionOS поддерживает игры Apple Arcade, которые могут работать с подключенным Bluetooth-геймпадом, а Apple сотрудничает с игровыми партнерами для создания новых игровых впечатлений для устройства.

App Store

Как и другие обновления операционных систем Apple, visionOS имеет собственный специализированный App Store, где пользователи могут находить сторонние приложения и игры, разработанные для устройства.

Приложение iPhone Vision Pro

С iOS 18.4 и visionOS 2.4 Apple добавила специальное приложение Apple Vision Pro для iPhone. Приложение можно использовать для поиска нового контента и пространственных впечатлений, а также для предоставления информации о вашем Vision Pro.

Приложение поддерживает поиск и загрузку контента, такого как приложения и игры, на Vision Pro.

Apple также добавила поддержку запуска гостевого сеанса с близлежащего iPhone или iPad и сопровождения гостя через навигацию Vision Pro с помощью View Mirroring.

Визуальный поиск

visionOS включает функцию визуального поиска, которую можно использовать для получения информации об объекте, обнаружения и взаимодействия с текстом в окружающем мире, копирования и вставки печатного текста из реального мира в приложения, перевода текста между 17 различными языками и многого другого.

Реальный текст, содержащий контактную информацию, веб-сайты, единицы измерения и аналогичную информацию, может быть использован в visionOS. Например, если на печатном раздаточном материале есть ссылка на веб-сайт, вы можете просканировать ссылку с помощью Vision Pro, открыв окно Safari для просмотра веб-сайта. Или, если рецепт требует граммов, а вам нужны унции, вы можете выполнить преобразование с помощью гарнитуры.

Перевод текста в реальном времени полезен для путешествий и других случаев, когда вам может понадобиться быстро перевести то, что вы видите в реальном мире. Гарнитура Apple Vision Pro может автоматически обнаруживать текст и документы, аналогично тому, как iPhone может обнаруживать текст на фотографиях и позволять взаимодействовать с ним.

Режим путешествия

Режим путешествия можно включить через Центр управления, и он предназначен для стабилизации изображения на Vision Pro для пользователей, которые носят гарнитуру в самолете или поезде, причем последняя поддержка доступна в visionOS 2.

Гостевые пользователи

Гостевой режим позволяет членам семьи и друзьям пользователя использовать Vision Pro с ограниченным доступом к определенным приложениям, таким как Photos и Safari. Учетная запись Apple ID основного пользователя, настройки, Optic ID, пароль, пароли, Apple Pay, Persona и данные о здоровье ограничиваются при активном режиме Гостевого пользователя.

Apple улучшила гостевую поддержку в visionOS 2, сохраняя данные рук и глаз последнего гостя в течение 30 дней, поэтому нет необходимости повторять процесс настройки каждый раз, когда гость использует гарнитуру.

Vision Pro интегрируется с Mac, выступая в качестве дисплея для ноутбука или настольного компьютера через функцию под названием Mac Virtual Display. Вы можете видеть все свои приложения Mac в виртуальном пространстве через AirPlay 2, используя клавиатуру и мышь, как обычно, для выполнения работы.

Обратите внимание, что вы можете использовать дисплей с Mac mini или Mac Studio, у которых нет собственного дисплея. Вторичный дисплей не требуется.

При включенном Mac Virtual Display приложения visionOS можно использовать вместе с виртуальным экраном Mac. Сам Vision Pro может быть зеркалирован на Mac через AirPlay или FaceTime.

Нет функции для использования приложений Mac по отдельности в смешанном рабочем пространстве с отдельными окнами для каждого. Вместо этого Vision Pro выступает в качестве дисплея для стандартного рабочего стола Mac, поэтому вы можете работать с приложениями только в пределах одного виртуального рабочего стола.

С visionOS 2.2 Apple добавила поддержку большего ультраширокого экрана, который, по словам Apple, эквивалентен использованию двух дисплеев 5K, расположенных рядом.

• Ваш Mac и Apple Vision Pro: что можно и чего нельзя

Вместо Face ID или Touch ID visionOS использует Optic ID — совершенно новую функцию безопасности для сканирования радужной оболочки глаза. Apple использует инфракрасные огни и камеры внутри гарнитуры для анализа уникального узора вашей радужной оболочки для целей аутентификации.

Optic ID можно использовать для входа в visionOS, совершения покупок и вместо паролей в приложениях и на веб-сайтах.

visionOS 26, следующее поколение visionOS, выйдет в сентябре этого года. visionOS 26 представляет ряд новых функций, включая пространственные виджеты, улучшения персон и улучшенные многопользовательские взаимодействия.

Пространственные виджеты

visionOS 26 перерабатывает виджеты, превращая их в пространственные объекты, которые интегрируются в физическую среду пользователей. Виджеты предлагают уникальные взаимодействия и остаются на том же месте между сеансами.

Виджеты «Часы», «Погода», «Календарь», «Музыка» и «Фотографии» можно размещать по всей комнате. Например, виджет «Фотографии» может отображаться как фоторамка на стене. Часы могут отображаться как настенные часы на столе.

Персоны

Персоны были обновлены, чтобы стать более реалистичными. Apple использует объемный рендеринг и машинное обучение для улучшения четкости и выразительности. Аватары Персон теперь имеют полный профиль с реалистичными волосами, ресницами и деталями кожи. Apple добавила более 1000 вариантов очков на выбор.

Пространственные сцены

С помощью Spatial Scenes 2D-фотографии можно превратить в 3D-сцены, которые ощущаются более реалистично. Spatial Scenes используют генеративный ИИ и вычислительную глубину для добавления большей перспективы к изображениям. Пользователи могут наклоняться и оглядываться вокруг улучшенных изображений в Photos, Spatial Gallery и Safari.

Взгляд для прокрутки

Появилась новая функция под названием Look to Scroll, которая позволяет перемещаться и прокручивать веб-сайты с помощью глаз.

Safari

Safari поддерживает пространственное браузерное окно — функцию, которая преобразует статьи и отображает пространственные сцены при прокрутке. Веб-разработчики также могут встраивать 3D-модели непосредственно в веб-страницы для иммерсивного шоппинга и просмотра.

Совместные впечатления

visionOS 26 поддерживает совместные пространственные впечатления между пользователями Vision Pro в одной комнате. Несколько пользователей могут вместе смотреть 3D-фильмы, играть в пространственные игры или совместно работать над проектами, добавляя удаленных участников в FaceTime.

Игровые контроллеры

Vision Pro поддерживает контроллеры PlayStation VR2 Sense в visionOS 26.

Дата запуска

Apple проведет мероприятие, посвященное представлению моделей iPhone 17, 9 сентября, и релиз-кандидат visionOS 26 должен появиться в тот же день. Apple, вероятно, выпустит visionOS 26 на неделе 15 сентября.