Siri sur HomePod a posé 800 questions et répondu correctement à 74% contre seulement 52% plus tôt cette année

L'analyste Apple Gene Munster de Loup Ventures a récemment testé la précision des assistants numériques sur quatre haut-parleurs intelligents en posant à Alexa, Siri, Google Assistant et Cortana une série de 800 questions chacune sur Amazon Echo, HomePod, Google Home Mini et Harmon Kardon Invoke respectivement.

Les résultats indiquent que Siri sur le HomePod a répondu correctement à 74,6% des questions, une amélioration spectaculaire par rapport au taux de réussite de 52,3% de l'orateur lorsque Loup Ventures lui a posé 782 questions similaires en décembre 2017.

Siri sur le HomePod est resté moins précis que Google Assistant sur le Google Home, qui a répondu correctement à 87,9% des questions du test. Pendant ce temps, Alexa sur l'Echo et Cortana sur l'Invoke ont suivi Siri sur le HomePod, répondant correctement à 72,5% et 63,4% des questions du test.

tableau des tailles de la boucle solo apple watch

Munster a attribué la précision améliorée du HomePod à « l'activation de plus de domaines au cours de l'année écoulée », car une série de mises à jour logicielles au cours des derniers mois ont permis à l'orateur de passer et de recevoir des appels téléphoniques, de programmer des événements de calendrier, de définir plusieurs minuteries, de rechercher des chansons. par les paroles, et plus encore.

Méthodologie

Loup Ventures dit avoir posé à chaque enceinte intelligente les mêmes 800 questions, et ils ont été notés sur deux métriques : si la requête a été comprise et si une réponse correcte a été fournie. L'ensemble de questions a été conçu pour « tester de manière exhaustive la capacité et l'utilité d'un haut-parleur intelligent » en fonction de cinq catégories :

• Local – Où se trouve le café le plus proche ?
  

• Commerce – Pouvez-vous me commander plus de serviettes en papier ?
  

• Navigation – Comment puis-je me rendre dans les quartiers chics en bus ?
  

• Information – A qui jouent les Twins ce soir ?
  

  quand l'iphone 5se est-il sorti

• Commandement – ​​Rappelez-moi d'appeler Steve à 14 h. aujourd'hui.

La société de capital-risque a déclaré qu'elle continuait de modifier son ensemble de questions afin de refléter les capacités changeantes des assistants numériques. 'Alors que l'informatique vocale devient plus polyvalente et que les assistants deviennent plus capables, nous continuerons à modifier notre test afin qu'il reste exhaustif', a déclaré Munster.

Résultats par catégorie

Selon Loup Ventures, Google Assistant sur Google Home a répondu correctement à la plupart des questions dans quatre des cinq catégories du test, mais n'a pas réussi à Siri sur le HomePod dans la catégorie 'commande':

L'avance de HomePod dans cette catégorie peut provenir du fait que le HomePod transmettra des requêtes SiriKit complètes comme celles concernant la messagerie, les listes et essentiellement tout autre chose que la musique à l'appareil iOS couplé au haut-parleur. Siri sur iPhone a une intégration profonde avec la messagerie, le calendrier, la messagerie et d'autres domaines d'intérêt dans notre catégorie Commande. Notre ensemble de questions contient également une bonne quantité de requêtes liées à la musique, dans lesquelles HomePod est spécialisé.

comment imprimer des captures d'écran sur mac

Loup Ventures a découvert que le HomePod et Google Home se situaient «la tête et les épaules au-dessus des autres» dans les catégories «local» et «navigation» en raison des données de propriété dans Apple Maps et Google Maps respectivement. 'Ces données constituent un avantage comparatif potentiel à long terme pour Siri et Google Assistant', a déclaré Munster.

Et après

Les lacunes de Siri ont été brutalement exposées sur le HomePod, qui repose presque entièrement sur l'assistant pour fonctionner, donc des preuves anecdotiques d'amélioration sont un bon signe, mais Apple a encore beaucoup de terrain à rattraper par rapport à ses concurrents.

Loup Ventures a reconnu que Siri reste limité sur le HomePod par rapport à ses capacités étendues sur l'iPhone. 'Cela est en partie dû au positionnement apparent d'Apple du HomePod non pas en tant que' haut-parleur intelligent ', mais en tant que haut-parleur domestique avec lequel vous pouvez interagir en utilisant votre voix avec Siri à bord', a déclaré Munster.

La société de capital-risque a déclaré qu'elle continuerait de comparer le HomePod à d'autres haut-parleurs intelligents au fil du temps au milieu des progrès rapides de l'intelligence artificielle.