Copilot Vision passe à la vitesse supérieure. Jusqu’à présent limité à l’analyse de deux fenêtres à la fois, l’outil IA de Microsoft peut désormais observer tout ce qui s’affiche sur l’écran de votre PC. Concrètement, il s’agit d’un mode de partage baptisé « Desktop Share » que l’utilisateur active manuellement. En cliquant sur une icône en forme de lunettes dans l’application Copilot, il devient possible de désigner un écran ou une fenêtre spécifique que l’IA pourra observer et analyser.
Un assistant qui voit tout, mais à votre demande
Contrairement à Recall (baptisée « Retrouver » en français), une autre fonctionnalité très controversée de Microsoft capable de prendre automatiquement des captures d’écran à intervalles réguliers, Copilot Vision fonctionne uniquement à la demande. L’activation du partage est volontaire, et il suffit de cliquer sur « Stop » ou sur la croix pour y mettre fin.
Une fois activée, la fonction de partage d’écran permet à Copilot d’analyser le contenu affiché et de répondre à des questions ou de fournir des suggestions en contexte. L’IA peut ainsi « aider à améliorer un projet créatif, à corriger un CV ou à guider l’utilisateur dans un nouveau jeu vidéo », selon Microsoft. Le système se comporte un peu comme un assistant vocal enrichi, capable de voir ce que vous voyez et de commenter à voix haute ce qui se passe à l’écran.
Copilot peut aussi répondre à des questions pratiques du type « que signifie ce message d’erreur ? » ou « comment créer un tableau dans Excel ? ». Mieux encore : la mise à jour permet désormais de déclencher cette assistance visuelle directement depuis une conversation vocale avec Copilot. L’utilisateur peut, au cours d’un échange oral avec l’IA, cliquer sur l’icône des lunettes pour partager son écran et donner plus de contexte à la discussion.
Cette fonctionnalité s’inscrit dans une série d’évolutions destinées à rendre l’IA plus utile et proactive dans Windows 11. Elle complète notamment le système « Highlights », qui propose automatiquement des contenus utiles en fonction des applications et des sites consultés.
La mise à jour est actuellement en cours de déploiement via le Microsoft Store pour les utilisateurs du programme Windows Insider, dans les régions où Copilot Vision est activé. Il s’agit de la version 1.25071.125 (ou ultérieure). Tous les testeurs ne recevront pas l’outil en même temps, mais Microsoft promet d’élargir la disponibilité au fil des semaines.
🟣 Pour ne manquer aucune news sur le Journal du Geek, suivez-nous sur Google et sur notre canal WhatsApp. Et si vous nous adorez, on a une newsletter tous les matins.
