Microsoft fait évoluer son assistant Copilot vers des interactions plus naturelles en s'appuyant sur la voix et la vue. Cette nouvelle phase de l'évolution de Copilot est en train d'être déployée sur le web, dans Windows et les apps iOS et Android. Les fonctions les plus avancées sont encore en test tandis que les autres font leurs premiers pas auprès des utilisateurs anglophones.
La page d'accueil « Discover » de Copilot a été complètement revue, elle est d'un abord plus chaleureux et fait plutôt penser à une interface de Google pour Android que venant de Microsoft. Des cartes de « découverte » aideront l'utilisateur à se lancer en proposant des sujets basés sur son historique ou en montrant quelques actions possibles. Ce contenu est dynamique, il évoluera au fil du temps.
Parmi les gros morceaux de cette refonte de Copilot, le premier est le recours à la voix pour discuter avec l'assistant. Copilot Voice adopte un ton naturel avec quatre voix au choix. On l'utilisera pour poser des questions, obtenir un conseil ou des suggestions.
L'autre morceau de choix est Copilot Vision : l'analyse en temps réel d'images et de textes dans des pages web. Copilot pourra commenter — après autorisation — ce que vous avez sous les yeux dans un navigateur web et apporter ses propres réflexions. L'assistant sera aussi là pour déchiffrer un contenu. La vidéo d'exemple montre un échange entre un utilisateur qui affiche à l'écran d'anciennes photos de sa mère et les exclamations épatées de l'intelligence artificielle… Plus loin, celle-ci s'efforce d'offrir un complément d'information sur une recette manuscrite de la maman, tirée d'une autre vieille photo.
« Si vous meublez un nouvel appartement, Copilot Vision peut vous aider dans votre recherche de mobilier, à trouver la bonne palette de couleurs, à envisager différentes options et même à suggérer des idées d’agencement pour votre espace », propose encore Microsoft. Ce dernier souligne que les éléments ainsi observés sont éphémères dans Copilot : « Aucun des contenus avec lesquels Copilot Vision interagit n’est stocké ou utilisé pour l’entrainement – une fois votre session terminée, les données sont définitivement supprimées ».
Ensuite, avec Copilot Daily, l'IA fera une synthèse des événements importants prévus dans la journée avec la météo et les principaux titres de l'actualité. Microsoft n'exploitera que des informations provenant de sites qui ont donné leur accord, il n'y aura pas d'informations provenant de sites payants ni de contenus jugés sensibles.
Enfin, Think Deeper s'occupera de problématiques plus complexes, explique Microsoft :
Il prend un peu plus de temps pour vous répondre, permettant à Copilot de fournir des réponses détaillées, formulées étape par étape, à des questions complexes. Il a été conçu pour vous aider dans des tâches variées du quotidien, comme comparer deux options complexes. Par exemple, devrais-je déménager dans cette ville ou celle-là ? Quel type de voiture correspond le mieux à mes besoins ?
Toutes ces nouveautés sont d'abord réservées aux pays anglophones. Les services plus pointus que sont Copilot Vision et Think Deeper, devront d'abord faire leurs preuves auprès d'un nombre plus limité de personnes :
- Think Deeper commencera à être déployé le 1er octobre pour un nombre limité d’utilisateurs de Copilot Pro en Australie, au Canada, en Nouvelle-Zélande, au Royaume-Uni et aux États-Unis.
- Copilot Voice est initialement disponible en anglais en Australie, au Canada, en Nouvelle-Zélande, au Royaume-Uni et aux États-Unis, et sera bientôt étendu à d’autres régions et langues.
- Copilot Daily sera déployé à partir d’aujourd’hui, d’abord aux États-Unis et au Royaume-Uni, avec d’autres pays à venir.
Source : Microsoft
