MacRumors

Skip to Content

За пределами мультитача: распознавание голоса, взгляда, мимики

Заявки Apple на патенты дают представление о том, что может ожидать нас в будущем. Например, мы наблюдали бум патентов на мультитач за год до выхода iPhone. И хотя многие из этих концепций могут так и не выйти на рынок, они представляют интересный взгляд на направление исследований Apple.

Одна из последних патентных заявок Apple называется «Слияние мультитач-данных» (Multitouch Data Fusion) и ее авторами являются Уэйн Вестерман и Джон Элиас (ранее из Fingerworks). Вестерман и Элиас являются авторами большого количества патентных заявок на мультитач и, вероятно, помогли создать мультитач-технологию, лежащую в основе iPhone от Apple. В то время как многие с тех пор надеются увидеть какой-либо продвинутый мультитач-интерфейс для Mac от Apple, в ноутбуках Apple была реализована лишь ограниченная поддержка мультитача.

Однако в «Слиянии мультитач-данных» Вестерман и Элиас уже исследуют использование других вводов для улучшения и расширения мультитач-интерфейсов. К ним относятся:

— Распознавание голоса
— Идентификация пальцев
— Вектор взгляда
— Выражение лица
— Движения портативных устройств
— Биометрия (температура тела, частота сердечных сокращений, сопротивление кожи, размер зрачка)

В патентной заявке приводятся примеры того, как каждый из этих элементов может использоваться в сочетании с мультитачем для улучшения пользовательского опыта. Вот несколько основных моментов:

051541 insert 200

Голос — Описывается, что некоторые задачи лучше подходят для распознавания голоса по сравнению с мультитачем. Например, если задача пользователя заключается в изменении размера, вращении и изменении цвета объекта на экране, то мультитач лучше всего подходит для задач изменения размера/вращения, но изменение цвета (или ввод текста) может быть лучше реализовано с помощью голосовой команды.

Идентификация пальцев — в статье предполагается, что использование встроенных камер (таких как iSight) с поворотным зеркалом может обеспечить вид на мультитач-жесты над клавиатурой. Эти видеоданные могут быть использованы для лучшего различения того, какие пальцы используются и в каком положении. В сочетании с сенсорным вводом это может быть использовано для создания более точных и специфичных жестов.

053148 gazerec 400

Взгляд — отслеживание того, куда смотрит пользователь, может помочь выбирать окна или объекты на экране. Вместо того чтобы перемещать указатель мыши к нужному окну, пользователь может просто направить взгляд на конкретное окно, а затем выполнить мультитач-жест.

Выражение лица — обнаружение разочарования на лице пользователя может предоставить подсказки для помощи или даже изменить поведение ввода. Пример: если пользователь неправильно пытается прокрутить окно, используя 3 пальца вместо 2, компьютер может обнаружить разочарование и либо принять ошибочный ввод, либо предложить пользователю помощь.

Многие из этих технологий, вероятно, появятся на рынке через несколько лет, но продолжают давать интересное представление о будущем Apple.