Долгожданная AR-гарнитура Apple будет оснащена несколькими высокочувствительными модулями 3D-зондирования для обеспечения инновационного пользовательского интерфейса с распознаванием жестов рук и объектов, согласно новой заметке аналитика Apple Минг-Чи Куо, полученной изданием MacRumors.

Мы прогнозируем, что структурированный свет AR/MR-гарнитуры сможет определять не только изменение положения рук пользователя или других людей, а также объектов перед глазами пользователя, но и динамические изменения деталей рук (подобно тому, как Face ID/структурированный свет/Animoji в iPhone могут определять динамические изменения выражения лица пользователя). Захват деталей движения рук может обеспечить более интуитивный и наглядный интерфейс человек-машина (например, распознавание руки пользователя от сжатого кулака до открытой ладони, удерживающей воздушный шар [изображение], который улетает).

Куо описывает способность гарнитуры распознавать как жесты рук, так и движения, чтобы обеспечить пользователю захватывающий опыт, когда пользователь сможет разжать руку, чтобы отпустить виртуальный воздушный шар.

Для достижения этого впечатляющего результата Apple, как ожидается, интегрирует четыре комплекта 3D-сенсоров, которые превосходят по качеству и характеристикам текущие iPhone. Куо считает, что качество этого интерфейса человек-машина является ключом к успеху грядущей AR-гарнитуры Apple. По словам Куо, эти возможности интерфейса включают управление жестами, распознавание объектов, а также отслеживание взгляда, распознавание радужной оболочки глаза, голосовое управление, распознавание кожи, распознавание выражений лица и пространственное определение.

Ранее в этом году издание Patently Apple обратило внимание на патентную заявку Apple под названием «Устройства, методы и графические пользовательские интерфейсы для взаимодействия с трехмерными средами», которая детализирует эту же концепцию.

Различные движения и положения микро-жестов, а также различные параметры движения используются для определения операций, выполняемых в трехмерной среде. Использование камер для захвата микро-жестов для взаимодействия с трехмерной средой позволяет пользователю свободно перемещаться по физическому пространству, не будучи скованным физическим оборудованием ввода, что позволяет пользователю исследовать трехмерную среду более естественно и эффективно.

Apple широко ожидает выпуска своего первого поколения устройства, ориентированного на AR, в 2022 году.