Сегодня Apple представила значительные улучшения «Визуального интеллекта», в том числе новый режим Siri в приложении «Камера», который может анализировать реальные объекты и выполнять действия непосредственно на основе того, что видит iPhone.

Вице-президент Apple по разработке программного обеспечения Себастьен Марино-Мез подробно рассказал об улучшениях во время сегодняшней презентации на WWDC. Он объяснил, что новый режим ‌Siri‌ в приложении «Камера» использует возможности распознавания изображений на базе базовых моделей Apple, чтобы определять, на что направлена камера, и предлагать уместные действия с учетом контекста.

Один из главных примеров использования — разделение счета. Пользователи могут навести камеру iPhone на счет в ресторане и сразу разделить итоговую сумму между друзьями, а интеграция с Apple Cash позволяет тут же отправить платежи. Apple также показала, как можно навести камеру на тарелку с едой, чтобы получить сведения о ее пищевой ценности.

‌«Визуальный интеллект»‌ появится и в visionOS, привнеся те же возможности на платформу Apple для пространственных вычислений. ‌Siri‌ может распознавать реальные объекты в окружении пользователя и по запросу предоставлять актуальную информацию о них.