Norman Winarsky : Siri n'est pas encore au niveau espéré
Si l'on demandait à des clients d'Apple de citer quelques-uns de ses produits qui les exaspèrent par leur comportement aléatoire, il est probable que Siri serait dans la liste.
Pas tant chez ceux qui limitent son utilisation au déclenchement d'un minuteur ou pour enregistrer un événement, mais chez tous ceux qui prennent au pied de la lettre sa description « d'assistant personnel intelligent » et attendent de lui, quelque peu naïvement, un comportement exemplaire à presque toutes leurs questions et demandes.
Pour Norman Winarsky, qui a participé à la création de Siri, huit ans après son acquisition par Apple, l'assistant n'est pas encore à la hauteur des espoirs que suscitaient cette opération.
Il explique à Quartz qu'il s'attendait à des prouesses qui ne sont pas venues. S'inquiéter de la météo, enregistrer un rappel, envoyer un message, programmer une alarme… pour toutes ces opérations, Siri est à l'aise.
Winarsky juge toutefois qu'il lui manque la capacité de mieux comprendre les préférences des utilisateurs, d'utiliser un historique d'informations, et qu'il n'est pas assez bon pour anticiper ce dont peut avoir besoin l'utilisateur. Les progrès dans les conversations avec l'utilisateur ne sont pas encore suffisants non plus, Siri ne va guère vous « surprendre agréablement » par son aptitude à soutenir un échange.
La critique est aisée, l'art est difficile, concède volontiers Norman Winarsky, qui reprend une déclaration de Bill Gates. Celui-ci disait que l'on a tendance à surestimer les changements qui surviendront dans les deux années suivantes et à sous-estimer ceux de la prochaine décennie.
Norman Winarsky explique sa déception par la réorientation qu'a connue Siri après son arrivée chez Apple. Au départ, l'assistant avait comme priorité d'aider dans les contextes d'un voyage ou pour des activité de loisirs. Si l'on arrivait à l'aéroport et que l'avion à prendre était annulé, le temps de sortir son téléphone, Siri était déjà en train de chercher un autre vol (ou une chambre d'hôtel en l'absence d'autre solution).
Son périmètre d'action était réduit mais il était très bon dans les domaines de compétences qui étaient les siens et il les aurait élargi progressivement vers des sujets voisins.
Apple a donné à Siri des missions beaucoup plus larges et variées, ce qui rend la tâche plus ardue pour qu'il les accomplisse avec efficacité et pour réaliser des sauts qualitatifs importants.
« Ce sont des problématiques ardues et lorsque vous êtes une entreprise qui s'adresse à 1 milliard de personnes, ces problèmes deviennent plus complexes encore », dit-il, avant de se demander si l'objectif n'est tout bonnement pas hors de portée : « Ils cherchent probablement à obtenir un niveau de perfection qu'ils ne peuvent atteindre ».
C’est vrai que c’est utile mais il y a vraiment des fois où j’ai envie de tout casser
Comme par exemple quand je demande à ma Watch d’appeler mon ami Silas et que Siri, inlassablement, me le prononce sans le s à la fin ! Qu’est ce que ça m’énerve lol
Mais y a pire, c’est quand Siri me dit je n’ai pas compris alors que j’ai a peine commencer a lui parler
Si sur mon iPhone dans l’ensemble j’en suis assez satisfait, sur ma watch pas trop car les cas sont légions ou il n’attend pas la fin de ma commande, ou il me dit de patienter, le rendant donc injustifié puisque je serais plus rapide de le faire moi même
Et puis en voiture, même si c’est interdit, il y a des fois où passer un appel depuis sa watch devrait être quand même bcp moins dangereux que depuis son iPhone mais au moins 3 fois sur 4 ça n’aboutit pas et c’est à ce moment là que l’usage en devient dangereux !!!
Combien de fois je lui demande de passer un appel et rien ne se passe , où alors le correspondant ne m’entend pas ou l’inverse, combien de fois il ne comprend pas le nom que je prononce ou alors il m’envoie tout simplement pour consulter directement sur l’iPhone
Bref, sur la watch je ne suis satisfait qu’à 20%
Et maintenant si on parlait du clavier sur iPhone !!!! Car la je n’en peux plus, y compris sur le x :(
@socotran77
Avec la Watch , il faut dire toute ta phrase d’un coup sans attendre que Siri se réveille ?
J’aime bien la citation de Bill Gates , mais la suite par Jean-Claude Van Dam
« sans « liberté de blâmer, il n’est pas d’éloges flatteurs » »
?✌?
J’ai essayé, on vit très bien sans l’inutile Siri
J'utilise souvent Siri, mais franchement, il est encore perfectible. Exemple, je dicte : "
C'est incroyable c'est vraiment incroyable je ne pensais pas que ce soit aussi un croyable "
Voyez le problème (!) il faut toujours le relire, et corriger ?
Sans en attendre des prouesses, on peut quand même espérer qu'il arrive au niveau de ses concurrents dans un futur pas trop lointain.
@Nico S
Vu le retard accumulé alors qu'il a commencé des années avant tous les autres.... j'en doute.
Je pense qu'Apple manque de motivation pour investir suffisamment dans le développement de Siri.
Siri, pour Apple, c'est juste une fonctionnalité parmi beaucoup d'autres.
Pour Google ou Amazon, les assistants vocaux sont au cœur de leur business. C'est primordial pour eux de comprendre toujours mieux les requêtes qui sont formulées. Ils en ont un usage commercial immédiat. Ils investissent donc énormément de temps et d'argent dans l'amélioration permanente de leurs assistants.
@Nico S
Oui oui, mais les autres vont encore avancer. Et certainement en accéléré.
Siri est clairement mauvais et le pire est le contraste avec Google Assistant, largement plus pertinent et largement plus capable de comprendre ce qu’on lui dit, et surtout ce qu’on lui demande...
J’ai le sentiment que la technologie sur laquelle repose Siri porte en elle les contraintes mêmes qui freinent son développement. En clair, Apple n’a pas acheté la bonne techno. On sent bien qu’année après année les progrès ne sont pas fulgurants.
Pour que Siri puisse aller plus loin, peut-être faudrait-il qu’Apple refasse complètement le moteur et/ou la manière de l’alimenter.
Siri c’est un peu la vitrine IA d’Apple. Là pour le coup, Apple semble patiner un peu dans ce domaine.
Cela dit, Siri colle assez bien à mes usages : programmer un rendez-vous, émettre un appel, envoyer un sms... où cette technologie ce révèle vraiment pratique.
Appelle maman portable ...
réponse : je ne connais pas votre mère Jerauuume ...
Et parfois ça marche sans soucis ! Ça, ça me rend dingue !
Minuteur Apple Watch :
Je vous ferai signe quand tout sera prêt la du coup l’œuf ou les pâtes citées plus haut sont en danger ...
Mais sur Apple Watch il est quand même meilleur que sur iphone je trouve.
« La critique est aisée, l'art est difficile »
Quelqu’un au siècle dernier avait dit « La critique est Thésée, l’art est Minautore ».
@Fennec72
"Quelqu’un au siècle dernier avait dit « La critique est Thésée, l’art est Minautore »."
J'imagine que c'était un contre exemple dans un cours sur le calembour, qui doit garder un sens ;)
@Bigdidou
Pourquoi « qui doit garder un sens ;) »?
Thésée et le Minautore, ça n’a pas de sens ?
@Fennec72
"Thésée et le Minautore, ça n’a pas de sens ?"
L'art est Minautore n'en a aucun.
Ça joue, certes sur le rapprochement de Thésée et du Minautore, mais il est gratuit.
Mais voilà, c'est juste une réflexion comme ça, rien d'autre, hein ;)
La déclaration inverse, Siri est au niveau espéré, serait très inquiétante :D
Il va se faire engueuler par Tim celui-là...
Car c'est bien Tim qui déclarait il y a peu il me semble qu'Apple était le seul à prendre soin et à avoir la patience de travailler des années dans l'ombre sur la conception de ses produits afin qu'ils ne sortent que lorsqu'ils étaient jugé parfait !
Siri est une plaie. Une véritable plaie. Ses 3 concurrents l'écrasent sans aucun soucis. Même l'assistant de MS est plus pertinent...C'est dire.
Apple met en avant l’expérience utilisateur.
Donc en 8 ans on pouvait attendre largement mieux.
Il est quasi inutilisable et reste donc un gimmick.
Avec des aberrations du type Siri sur Mac ne gère pas HomeKit ?
J’ai pourtant insisté pas mal en l’utilisant, et en particulier justement avec HomeKit...mais au final je ne m’en sert plus du tout.
Bref on nous vend de « l’expérience utilisateur » mais comme Plan qui est nul, Siri est nul.
J’ai récemment acheté un Google home mini, et Google assistant est clairement ce que j’attend d’un assistant personnel (je ne m’en sert pas comme enceinte).
Alors que j’étais enthousiaste lors de la présentation du HomePod avec l’intégration de Siri,bah maintenant vu l’expérience avec le Home mini et les test de l’HomePod que j’ai pu voir et lu.... bah non merci... (je vous conseille le test par iPhonedo sur YouTube sur le Siri du HomePod ?)
PS: je regardais l’autre jour la série « Ash va Evil Dead » est surprise il y a Lee Majors ( l’homme qui valait 3 milliards/l’homme qui tombe à pic) qui joue un personnage. Je pose la question au Home mini « quel âge a Lee Majors ? » « Lee Majors à 78 ans »
Je test avec Siri: il comprend
« quel âge a le même jour ? »
« Quel âge a allumer le jour ? »...
Bref...
Siri a des défauts mais c’est sûrement proche du maximum qu’on puisse atteindre sans recourir au profiling et puiser dans les données personnelles de l’utilisateur (écoute de son environnement sonore, analyse de sa navigation web, de ses requêtes de recherche, des vidéos vues ou likées sur Youtube, de ses achats en ligne, de ses playlists musicales, etc.)
Siri mène une bataille qu’il ne peut gagner contre Google Home et Amazon Echo, la faute aux données anonymisées par Apple. C’est une contrepartie à la confidentialité que j’accepte.
Rien ne dit que dans 10 ans, les progrès en machine learning aidant, Siri ne soit pas enfin suffisamment fiable comme assistant à tout faire tout en respectant notre vie privée là où Amazon, Facebook et Google seront devenus des prescripteurs publicitaires impossible à tromper/semer/ignorer.
Il sera trop tard pour regretter que simplement pour avoir les bons résultats à la requête « quel film de pirate a fait Johnny Depp ? » on aura donné la clef de toutes nos données...
@Silverscreen
Travailler sur des données anonymisees n'empêche pas d'améliorer la compréhension des phrases.
Quand tu demandes "quel film de pirates à fait johnny depp", Siri comprend les mots (il peut réécrire la question) mais il n'en comprend pas le sens.
Les assistants de Google ou Amazon ont progressé bcp plus vite que celui d'Apple et ce n'est pas parce que eux gardent en mémoire que TU t'intéresses aux films, aux pirates, à johnny depp, mais juste parce qu'en amont de ce traitement sur tes données personnelles, ils ont mis plus de moyens de calcul et de recherche sur la compréhension du langage naturel.
@r e m y
Siri pourrait indéniablement progresser sur le langage naturel, c’est vrai.
Mais, pour moi Siri bute encore beaucoup trop souvent sur la simple reconnaissance des noms propres et des termes étrangers. 2 choses en lesquelles une connaissance contextuelle aide énormément.
De plus, la performance sur le langage naturel est meilleure quand les algorithmes du machine learning ont mouliné plus de données et Google, Amazon, Microsoft (Bing) et Facebook ont une quantité de données phénoménale comparativement à Apple. Notamment les textes écrits (commentaires, requêtes de recherche), les vidéos (son+images) et les photographies hébergées. C’est aussi grâce à ça que les outils de reconnaissance faciale, de conversation ou d’objets de Facebook et Google sont bluffants...
Après, Apple a tergiversé plusieurs fois sur la direction à donner à Siri et il y a bien plusieurs Siris utilisés actuellement, comme autant de directions suivies : j’espère qu’Apple progressera en intégrant les progrès des différents modèles à l’oeuvre (iOS, Apple TV et HomePod ont bien 3 modèles différents).
@Silverscreen
Et pourtant on nous dit en permanence que Siri est celui qui est le plus utilisé de tous les assistants personnels... donc si ces statistiques sont réelles, alors Apple est celui qui dispose du plus grand nombre de requêtes à analyser, sauf bien sûr si les requêtes formulées par écrit sur Google ou sur les pages Amazon servent également.
@r e m y
Bien sûr que les requêtes écrites sont utilisées. Ensuite Google, via Youtube, a des tonnes de vidéos analysées : d’abord pour reconnaitre les films diffusés sans l’autorisation des ayant droit, maintenant pour reconnaitre des visages, des occurences de gens connus. La même analyse peut concerner des dialogues, des expressions faciales etc.
https://cloud.google.com/video-intelligence/
Cet article ne fait de gratter la surface puisque l’analyse est destinée aux utilisateurs finaux et ne concerne pas les recherches internes à Google.
D’ailleurs rien ne nous dit que l’acquisition de Shazam pour améliorer Siri ne concerne pas aussi la reconnaissance sémantique...
@r e m y
"Siri comprend les mots (il peut réécrire la question) mais il n'en comprend pas le sens. "
En fait, il ne comprends pas le mot pirate qui ne renvoie à rien et qui est ignoré.
On s'en rend compte avec des requêtes croisées contenant ce mot.
Siri reste fort heureusement un assistant et n’a aucune forme d’intelligence, donc parler d’assistant intelligent n’a pas de sens. Le probleme avec Siri a l’air d’etre la reconnaissance vocale de l’utilisateur, avec un fort (ou mauvais) accent, petit Siri va galerer... Mais on peut faire tellement de choses avec Siri, je l’utilise plusieurs fois par jour, que ca soit l’HomePod, l’AW, l’Apple TV ou l’iPhone, ca repond toujours a ma requete, certes pas hyper complexe. Je pense que beaucoup d’utilisateurs ignorent aussi comment utiliser Siri convenablement. Pour l’Apple TV par exemple, Siri est une tuerie, il ne sert pas a remplacer le clavier:
https://www.imore.com/what-can-siri-do-apple-tv
Apple a aussi fait beaucoup de progres pour integrer les resultats, j’ai demande a Siri Apple TV au coup de sifflet final si la Juventus etait qualifiee pour les quarts, Siri m’a agreablement surpris par la positive en me donnant aussi le score du match contre Tottenham.
Dis Siri, pourquoi ne comprends-tu pas toujours ce qu'on te demande:
Réponse: désolé, mon langage est encore limité...
Siri est une plaie.
Plusieurs choses exaspérantes:
- impossible d’avoir des requêtes contenant deux langues (ex titre d’une chanson)
- impossible d’avoir des requêtes contextualises (ex: “joue la dernière musique que j’ai noté 5 étoiles”, je “tourne à droite ou à gauche”)
- support extrêmement limite des apps tierces (ex: “dans combien de temps passe le bus à l’arret XXX sur citymapper” (évidemment encore moins possible “dans combien de temps passe mon bus”, cf ci dessus))
- “vous devez d’abord déverrouiller votre iPhone” alors que celui ci est ma veste et qu’il fait 2°, que j’ai les mains pleines de courses, et que j’utilise mes AirPods.
Etc etc.
Bref, c’est pas avec Siri que les robots vont asservir l’humanité pour en faire un groupe électrogène géant.
@Antwan
"Bref, c’est pas avec Siri que les robots vont asservir l’humanité pour en faire un groupe électrogène géant."
?
On peut difficilement reprocher à Norman Winarsky de ne pas savoir de quoi il parle, et son avis est particulièrement intéressant. Je rejoins tout à fait l'analyse faite par r e m y ci-dessus : le gros problème de Siri c'est le manque d'intérêt qu'Apple lui porte, du fait d'une absence de retour sur investissement. La situation est d'ailleurs totalement identique, selon moi, avec Apple Plans.
La Pomme vendrait-elle davantage d'appareils si Siri était au niveau de ses concurrents ? Et s'il était légèrement supérieur ? La réponse est non, et donc Apple ne voit aucun intérêt à y consacrer beaucoup de ressources. On le voit à nouveau avec le HomePad, que son concepteur à choisi de positionner comme une "enceinte audio" et non pas comme un "assistant domestique". Résultat : Siri y est limité et ne casse pas des briques. Pendant ce temps, Google et Amazon occupe l'espace médiatique. Cela leur permettra-t-il de gagner beaucoup d'argent ? C'est difficile à dire, mais c'est clairement leur but, et donc ils investissent dans ce secteur et cela se ressent.
Tant que le but d'Apple sera de vendre des appareils, je ne pense pas qu'on pourra espérer une révolution du côté des logiciels et technologies embarquées. Pour Siri, si la Pomme réussissait à mettre au point des fonctionnalités qui le démarquaient vraiment de la concurrence, alors elle serait prête à y consacrer un budget important, car derrière cela ferait choisir aux clients un iPhone plutôt qu'un appareil Android. Aujourd'hui, ce n'est pas le cas.
Cordialement,
HAL1
Pages