В ежегодном тесте, сравнивающем Google Assistant, Siri и Alexa на смартфонах, Джин Мюнстер из Loup Ventures обнаружил, что Siri смог правильно ответить на 83% вопросов, опередив Alexa, но уступив Google Assistant.
Мюнстер задал каждому цифровому ассистенту по 800 вопросов в ходе теста, чтобы сравнить их ответы. Alexa правильно ответила на 79,8% вопросов, в то время как Google Assistant правильно ответил на 92,9% вопросов.
По сравнению с прошлым годом, Siri показал улучшение. В ходе июльского теста 2018 года Siri правильно ответил на 79% вопросов, по сравнению с 83% правильных ответов в этот раз. В прошлом году Alexa показывала 61%, а Google Assistant — 86%, так что улучшения произошли во всех цифровых голосовых ассистентах.
Этот тест был посвящен исключительно смартфонам, сравнивая устройства iPhone и Android. Мюнстер утверждает, что смартфоны были выделены отдельно от умных колонок, поскольку, хотя базовая технология схожа, «варианты использования различаются». Siri тестировался на iPhone под управлением iOS 12.4, Google Assistant — на Pixel XL, а Alexa — в приложении для iOS.
Вопросы были сгруппированы по пяти категориям, и всем ассистентам были заданы одни и те же 800 вопросов. Каждый набор вопросов был разработан для «всестороннего тестирования возможностей и полезности цифрового ассистента». Некоторые примеры вопросов из каждой категории:
- Местные — Где ближайшая кофейня?
- Коммерция — Закажи мне еще бумажных полотенец.
- Навигация — Как добраться до Аптауна на автобусе?
- Информация — Против кого сегодня играют «Твинс»?
- Команда — Напомни мне позвонить Джерому в 14:00 сегодня
Siri показал лучшие результаты в категориях команд, местных запросов и навигации, показав худшие результаты в категориях информации и коммерции. Siri фактически победил в категории команд, но уступил Google Assistant в других категориях.
Siri продолжает доказывать свою полезность в функциях, связанных с телефоном, таких как звонки, отправка сообщений, электронная почта, календарь и музыка. И Siri, и Google Assistant, встроенные в операционную систему телефона, значительно превзошли Alexa в разделе команд.
Мюнстер говорит, что продолжающиеся темпы улучшений «продолжают удивлять», учитывая заметные улучшения, которые каждый голосовой ассистент продемонстрировал за последние несколько лет.
В будущем Loup Ventures ожидает дальнейших улучшений за счет расширения функционала каждого голосового ассистента.