Apple Vision Pro, новое устройство Apple для «пространственных вычислений», не имеет аппаратного управления. Оно полагается на отслеживание глаз и жесты рук, чтобы позволить пользователям манипулировать объектами в виртуальном пространстве перед собой. В недавней сессии для разработчиков дизайнеры Apple описали конкретные жесты, которые можно использовать с Vision Pro, и как будут работать некоторые взаимодействия.

• Касание — Сведение большого и указательного пальцев сигнализирует гарнитуре, что вы хотите коснуться виртуального элемента на дисплее, на который смотрите. Пользователи также описывают это как щелчок, и это эквивалентно касанию экрана iPhone.
• Двойное касание — Двойное касание инициирует жест двойного касания.
• Щелчок и удержание — Щелчок и удержание похожи на жест касания и удержания и выполняют такие действия, как выделение текста.
• Щелчок и перетаскивание — Щелчок и перетаскивание можно использовать для прокрутки и перемещения окон. Вы можете прокручивать горизонтально или вертикально, и если вы переместите руку быстрее, вы сможете прокручивать быстрее.
• Масштабирование — Масштабирование — это один из двух основных двуручных жестов. Вы можете свести пальцы вместе и развести руки, чтобы увеличить масштаб, а уменьшение масштаба, вероятно, будет выполняться движением сведения рук. Размеры окон также можно регулировать, перетаскивая за углы.
• Вращение — Вращение — это другой двуручный жест, и, судя по диаграмме Apple, он будет включать в себя сведение пальцев и вращение рук для манипулирования виртуальными объектами.

Жесты будут работать в сочетании с движениями глаз, а многочисленные камеры Vision Pro с высокой точностью отслеживают, куда вы смотрите. Положение глаз будет ключевым фактором при нацеливании на то, с чем вы хотите взаимодействовать с помощью жестов рук. Например, взгляд на значок приложения или элемент на экране нацеливает его и выделяет, а затем вы можете продолжить жест.

Жесты рук не должны быть размашистыми, и вы можете держать руки на коленях. Apple даже поощряет это, поскольку это предотвратит усталость ваших рук и плеч от нахождения в воздухе. Вам нужен лишь небольшой жест щелчка, эквивалентный касанию, поскольку камеры могут отслеживать точные движения.

То, на что вы смотрите, позволит вам выбирать и манипулировать объектами, которые находятся как близко, так и далеко от вас, и Apple предвидит сценарии, когда вы можете захотеть использовать более крупные жесты для управления объектами, которые находятся прямо перед вами. Вы можете протянуть руку и использовать кончики пальцев для взаимодействия с объектом. Например, если перед вами окно Safari, вы можете протянуть руку и прокрутить его оттуда, вместо того чтобы использовать пальцы на коленях.

В дополнение к жестам, гарнитура будет поддерживать движения рук, такие как набор в воздухе, хотя похоже, что те, кто получил демо-версию, еще не смогли опробовать эту функцию. Жесты, конечно, будут работать вместе, и чтобы, например, создать рисунок, вы посмотрите на точку на холсте, выберете кисть рукой и используете жест в воздухе для рисования. Если вы посмотрите в другое место, вы сможете немедленно переместить курсор туда, куда смотрите.

Хотя это шесть основных системных жестов, описанных Apple, разработчики могут создавать пользовательские жесты для своих приложений, которые будут выполнять другие действия. Разработчики должны убедиться, что пользовательские жесты отличаются от системных жестов или распространенных движений рук, которые люди могут использовать, и что жесты можно часто повторять без напряжения рук.

Для дополнения жестов рук и глаз к гарнитуре можно подключать клавиатуры Bluetooth, трекпады, мыши и игровые контроллеры, а также имеются инструменты голосового поиска и диктовки.

Несколько человек, которые смогли опробовать Vision Pro, использовали одно слово для описания системы управления — интуитивно. Дизайнеры Apple, похоже, создали ее для работы аналогично жестам мультитач на ‌iPhone‌ и iPad, и пока что отзывы были положительными.

Видеограф MacRumors Дэн Барбера смог опробовать гарнитуру и был впечатлен элементами управления. Вы можете увидеть его полный обзор своего опыта на нашем YouTube-канале.