Сегодня на WWDC Apple представила Apple Intelligence — глубоко интегрированный, персонализированный опыт работы с ИИ для устройств Apple, который использует передовые генеративные технологии искусственного интеллекта для улучшения пользовательского опыта на iPhone, iPad и Mac.
Apple заявляет, что «Apple Intelligence» «сочетает мощь генеративных моделей с личным контекстом для предоставления чрезвычайно полезного и релевантного интеллекта». Интегрированный в iOS 18, iPadOS 18 и macOS Sequoia, он может генерировать текст и изображения, выполнять действия в приложениях и использовать личный контекст для упрощения и ускорения повседневных задач. А благодаря Private Cloud Compute Apple фокусируется на предоставлении ИИ, основанного на конфиденциальности, с возможностью гибкого масштабирования вычислительной мощности между обработкой на устройстве и более крупными серверными моделями, работающими на выделенных серверах Apple Silicon.
«Мы рады представить новую главу в инновациях Apple. Apple Intelligence преобразит то, что пользователи смогут делать с нашими продуктами, и то, что наши продукты смогут делать для наших пользователей», — сказал Тим Кук, генеральный директор Apple. «Наш уникальный подход сочетает генеративный ИИ с личным контекстом пользователя для предоставления по-настоящему полезного интеллекта. И он может получить доступ к этой информации совершенно конфиденциальным и безопасным способом, чтобы помочь пользователям делать то, что для них важнее всего. Это ИИ, каким его может представить только Apple, и нам не терпится, чтобы пользователи ощутили, на что он способен».
В числе основных функций — новые способы улучшить письмо и более эффективно общаться. Apple утверждает, что благодаря совершенно новым системным инструментам написания, встроенным в iOS 18, iPadOS 18 и macOS Sequoia, пользователи могут переписывать, проверять и суммировать текст практически везде, где они пишут, включая Почту, Заметки, Pages и сторонние приложения.
Например, с помощью функции «Переписать» Apple Intelligence позволяет пользователям выбирать из различных версий написанного текста, а затем настраивать тон «в соответствии с аудиторией и поставленной задачей». По данным Apple, функция «Переписать» помогает пользователям подобрать правильные слова для любого случая, будь то доработка сопроводительного письма или добавление юмора и креативности в приглашение на вечеринку. Новая опция «Проверить» проверяет грамматику, выбор слов и структуру предложений, а также предлагает правки — с объяснениями правок — которые пользователи могут просмотреть или быстро принять. А с помощью функции «Суммировать» пользователи могут выбрать текст и получить его краткое изложение в виде удобочитаемого абзаца, основных тезисов в виде списка, таблицы или перечня.
В приложении «Почта» новый раздел вверху входящих сообщений под названием «Приоритетные сообщения» отображает ваши самые срочные электронные письма, например, приглашение на ужин в тот же день или посадочный талон. Но вместо предварительного просмотра первых нескольких строк каждого письма, вы можете увидеть сводки, не открывая сообщение. Между тем, для длинных цепочек писем вы можете просмотреть соответствующие детали одним касанием. Также имеется функция «Умный ответ», которая предлагает варианты для быстрого ответа. Эта функция также определяет вопросы в электронном письме, чтобы гарантировать, что на все вопросы будут даны ответы, согласно Apple.
В других местах новая функция «Приоритетные уведомления» выводит оповещения в верхнюю часть стека, чтобы показать, что для вас наиболее важно, а сводки помогают просматривать длинные или сгруппированные уведомления, отображая ключевые детали прямо на экране блокировки, например, когда групповой чат особенно активен. Чтобы помочь пользователям сосредоточиться на том, что они делают, также есть новый режим «Фокусирование» под названием «Уменьшить прерывания», который отображает только те уведомления, которые могут потребовать немедленного внимания, например, сообщение о раннем заборе ребенка из детского сада.
В приложениях «Заметки» и «Телефон» Apple Intelligence позволяет записывать, транскрибировать и суммировать аудио. Когда запись инициируется во время звонка, участники автоматически уведомляются, и после окончания звонка Apple Intelligence генерирует сводку, чтобы помочь вспомнить ключевые моменты. Новая функция Image Playground также позволяет пользователям выбирать из множества концепций из таких категорий, как темы, костюмы, аксессуары и места, чтобы создавать собственные изображения для обмена в Сообщениях, Заметках, Keynote, Freeform и Pages, а также в сторонних приложениях, поддерживающих новый API Image Playground.
Выводя эмодзи на новый уровень, пользователи также могут создавать оригинальные Genmoji для самовыражения. Просто набрав описание, появится ваш Genmoji, а также дополнительные варианты. Пользователи также могут создавать Genmoji друзей и семьи на основе их фотографий. Как и обычные эмодзи, Genmoji можно вставлять непосредственно в сообщения или делиться ими как стикерами или реакциями в Tapback.
Переходя в приложение Photos, можно использовать естественный язык для поиска конкретных фотографий, таких как «Майя катается на скейтборде в футболке с тай-дай» или «Кэти с наклейками на лице». Поиск в видео также становится мощнее благодаря возможности находить конкретные моменты в клипах, чтобы пользователи могли сразу перейти к соответствующему сегменту. Кроме того, новый инструмент «Очистить» может идентифицировать и удалять отвлекающие объекты на заднем плане фотографии, не изменяя при этом случайно основной объект, согласно Apple.
С помощью «Воспоминаний» пользователи могут создать историю, которую хотят увидеть, просто набрав описание. Используя понимание языка и изображений, Apple Intelligence выберет лучшие фотографии и видео на основе описания, создаст сюжет с главами на основе тем, выявленных на фотографиях, и смонтирует их в фильм с собственным повествовательным арком. Пользователи даже получат предложения песен, соответствующие их воспоминаниям, из Apple Music. Как и все функции Apple Intelligence, фотографии и видео пользователей хранятся конфиденциально на устройстве и не передаются Apple или кому-либо еще.
Apple также делает акцент на кроссплатформенных улучшениях Siri, которая, как утверждается, стала «более естественной, более контекстно-релевантной и более персонализированной, с возможностью упрощать и ускорять повседневные задачи». Например, она может следить за пользователем, если тот запинается, и сохранять контекст от одного запроса к другому. Кроме того, пользователи могут набирать текст для Siri и переключаться между текстом и голосом, чтобы общаться с Siri так, как им удобно. У Siri также новый дизайн, отражающий ее новые возможности, с светящимся индикатором, который обводится по краю экрана, когда Siri активна.
Siri сможет отвечать на запросы о том, как что-то сделать на iPhone, iPad и Mac, а благодаря распознаванию содержимого на экране Siri сможет понимать и выполнять действия с контентом пользователей в большем количестве приложений со временем, согласно Apple. Например, если друг отправляет пользователю свой новый адрес в Сообщениях, получатель может сказать: «Добавь этот адрес в его контактную карту», и Siri сделает именно это. Аналогичные действия будут распространяться на приложения Apple и сторонние приложения.
Siri сможет предоставлять интеллект, адаптированный к пользователю и его информации на устройстве. Например, пользователь может сказать: «Включи тот подкаст, который рекомендовал Джейми», и Siri найдет и включит эпизод, не заставляя пользователя вспоминать, было ли это упомянуто в тексте или электронном письме. Или они могут спросить: «Когда приземлится рейс мамы?», и Siri найдет детали рейса и сопоставит их с отслеживанием рейса в реальном времени, чтобы сообщить время прибытия.
Благодаря обработке на устройстве Apple заявляет, что ее ИИ-функции осведомлены о ваших личных данных, не собирая их. И когда ей требуется большая вычислительная мощность, она отправляет на серверы Apple Private Cloud Compute только те данные, которые необходимы для выполнения запроса, разделяя те же возможности конфиденциальности и безопасности вашего iPhone, по данным Apple.
Для подтверждения конфиденциальности Apple заявляет, что независимые эксперты могут проверять код, который выполняется на серверах Apple Silicon, а Private Cloud Compute криптографически гарантирует, что iPhone, iPad и Mac не взаимодействуют с сервером, если его программное обеспечение не было публично зарегистрировано для проверки. «Apple Intelligence с Private Cloud Compute устанавливает новый стандарт конфиденциальности в области ИИ, открывая интеллект, которому пользователи могут доверять», — заявляет Apple.
Apple интегрирует доступ к ChatGPT в функционал iOS 18, iPadOS 18 и macOS Sequoia, позволяя пользователям получать доступ к его экспертизе — а также к его возможностям понимания изображений и документов — без необходимости переключаться между инструментами. Apple заявляет, что у пользователей запрашивают разрешение перед отправкой любых вопросов в ChatGPT, включая документы или фотографии, и затем Siri напрямую представляет ответ.
Кроме того, ChatGPT будет доступен в системных инструментах написания Apple, чтобы помочь пользователям генерировать контент для всего, о чем они пишут. Например, с помощью функции «Создать» пользователи также смогут использовать инструменты изображений ChatGPT для создания изображений в различных стилях, чтобы дополнить то, что они пишут.
Apple заявляет, что ChatGPT появится в iOS 18, iPadOS 18 и macOS Sequoia позже в этом году на базе GPT-4o. Пользователи смогут получить к нему доступ бесплатно, без создания учетной записи, а подписчики ChatGPT смогут подключать свои учетные записи и получать доступ к платным функциям прямо из этих интерфейсов.
