Microsoft introduit Copilot Vision, une nouvelle fonctionnalité pour son assistant IA, actuellement en phase de test aux États-Unis. Intégré dans le navigateur Edge, il permet à l’IA de visualiser les contenus affichés à l’écran et d’interagir vocalement avec l’utilisateur, facilitant ainsi la navigation en ligne. Des exemples d’utilisation incluent le shopping et la planification d’activités. La confidentialité est assurée par des mesures spécifiques, et l’accès est limité à un groupe restreint d’abonnés Copilot Pro.
Nouveau Copilot Vision de Microsoft : Une Expérience Innovante
À l’instar de Windows Recall, qui offre à l’intelligence artificielle l’accès aux contenus affichés sur votre écran, Microsoft lance une fonctionnalité similaire pour son assistant IA, Copilot. Actuellement en phase de test préliminaire, Copilot Vision est proposé à un nombre restreint d’utilisateurs aux États-Unis.
Interagir avec l’IA dans votre Navigateur
Comme son nom l’indique, Copilot Vision a la capacité de visualiser ce qui s’affiche sur votre écran, en particulier dans le navigateur Edge de Microsoft. Cette fonction vous permet de naviguer sur le web en compagnie de l’IA. Vous pouvez lui poser des questions concernant ce que vous observez, qu’il s’agisse d’images, de vidéos, de textes ou même d’écriture manuscrite. Mieux encore, vous n’avez pas besoin de taper vos questions, il vous suffit de lui parler.
Dans un communiqué de presse de Microsoft, il est mentionné que « quand vous activez Copilot Vision, il voit la page que vous consultez, lit avec vous, et vous pouvez discuter des problèmes que vous rencontrez ensemble. La navigation devient ainsi une expérience partagée, plutôt qu’une simple interaction avec vos onglets. »
Ce nouvel assistant est conçu pour agir comme un compagnon durant votre navigation. Par exemple, lorsque vous explorez un site de vente en ligne comme Amazon ou Zappos, vous pourrez lui demander des conseils sur les produits que vous examinez. De même, si vous consultez des critiques de restaurants, vous pourrez interroger Copilot sur des détails spécifiques, comme des recommandations pour des anniversaires. Étant intégré directement dans Edge, Microsoft espère que cette fonctionnalité sera fréquemment utilisée, prouvant ainsi sa pertinence.
Microsoft a également fourni trois exemples pratiques d’utilisation de Copilot Vision, couvrant des domaines tels que le shopping, la planification d’une visite au musée et même le gaming. Cette dernière fonctionnalité rappelle Game Assist dans Edge, qui facilite la navigation entre les onglets.
Pour ceux qui s’inquiètent des questions de confidentialité liées à Copilot Vision, sachez que Microsoft a mis en place des mesures plus rassurantes. L’utilisation de cette fonctionnalité est entièrement optionnelle et est actuellement accessible uniquement via Copilot Labs pour un groupe limité d’abonnés à Copilot Pro aux États-Unis.
De plus, pour l’instant, Copilot Vision est limité à un ensemble restreint de sites web. Microsoft prévoit d’élargir cette fonctionnalité uniquement lorsque cela sera approprié. La société a déclaré : « Nous prenons notre temps pour recueillir des retours, améliorer notre technologie, et nous étendrons l’accès à davantage d’abonnés Pro et de sites au fil du temps. »
Enfin, pour ceux qui font partie de la phase bêta de Copilot Vision, un autre avantage est que les données de votre session seront supprimées après utilisation. Cela garantit que vos informations ne restent pas stockées dans l’assistant, seules les réponses aux outils « sont conservées pour améliorer nos systèmes de sécurité », selon les dires de Microsoft.
Si vous souhaitez découvrir cette fonctionnalité et que vous êtes un abonné à Copilot Pro aux États-Unis, vérifiez via Copilot Labs pour voir si Copilot Vision pour Edge est disponible pour vous en tant qu’aperçu.