Scribble — одна из самых заметных новых функций iPadOS 14. В новом интервью с Popular Mechanics старший вице-президент Apple по разработке программного обеспечения Крейг Федериги раскрыл подробности о том, как она была разработана и как работает на iPad.

С помощью Scribble в iPadOS 14 вы можете использовать ‌Apple Pencil‌ для письма в любом текстовом поле, и написанный текст затем преобразуется в печатный. Эта функция означает, что вы можете использовать ‌‌Apple Pencil‌‌ без необходимости переключаться на клавиатуру при написании электронного письма, создании события календаря, посещении URL-адреса, отправке iMessage или выполнении поиска.

Федериги объяснил Popular Mechanics, что ранняя разработка Scribble опиралась на обширный сбор данных, включая анализ того, как люди со всего мира записывают информацию.

«Когда дело доходит до понимания [рукописных] штрихов, мы занимаемся сбором данных. Мы находим людей по всему миру и просим их что-нибудь написать», — говорит Крейг Федериги, старший вице-президент по разработке программного обеспечения в Apple. «Мы даем им карандаш, и они пишут быстро, пишут медленно, пишут под наклоном. Учитывается все это разнообразие».

Этот метод отличается от сравнительно простого подхода сканирования и анализа существующего почерка. Федериги говорит, что для технологий Apple статических примеров было недостаточно. Им нужно было видеть штрихи, из которых состоит каждая буква. «Если вы понимаете штрихи и то, как они наносились, это может быть использовано для устранения неоднозначности того, что было написано».

Интеграция распознавания на основе штрихов с прогнозированием символов и слов осуществляется на самом устройстве, что стало возможным благодаря машинному обучению и мощным вычислительным ресурсам, объяснил глава отдела программного обеспечения Apple.

«Это должно происходить в режиме реального времени, прямо сейчас, на устройстве, которое вы держите в руках», — говорит Федериги. «Это означает, что вычислительная мощность устройства должна быть такой, чтобы оно могло выполнять такой уровень обработки локально».

Благодаря Scribble и iPadOS 14 ‌iPad‌‌ можно использовать почти полностью с помощью касаний и инструментов, и потребность в наборе текста минимальна. Если вы предпочитаете писать от руки, Scribble предлагает инструменты, которые только улучшают этот процесс. Посмотрите видеообзор выше, чтобы увидеть Scribble в действии.