Microsoft pourrait bientôt laisser Copilot voir l’intégralité de votre écran, mais ce n’est pas une mauvaise chose
Microsoft teste une nouvelle fonctionnalité sur Copilot, et cette fois, elle arrive sur PC. Copilot Vision , récemment rendu disponible sur mobile, est désormais disponible pour des tests sur PC, et les capacités sont à la fois impressionnantes et un peu effrayantes. Microsoft donne également un coup de pouce à la recherche de fichiers.
Copilot Vision permettra à l'application de tout voir sur votre écran, à condition que vous le souhaitiez. Vous pouvez partager des fenêtres de navigateur, l'intégralité de votre bureau ou même un jeu pour obtenir des commentaires en temps réel de Copilot. Au lancement, vous choisirez la fenêtre de navigateur ou l'application que vous souhaitez partager avec Copilot, et à partir de là, vous pourrez parler à Copilot comme vous le feriez avec un agent de support technique. Vous pouvez arrêter le partage à tout moment.

Microsoft a partagé une capture d'écran de la fonctionnalité, montrant un fichier Word partagé avec l'application. Vous pouvez parler à Copilot Vision par la voix ou par SMS, et l'application est censée vous guider tout au long du processus de tout ce que vous essayez de faire.
The Verge a présenté une démo de Copilot Vision qui a été mise à disposition pour test lors de la fête du 50e anniversaire de Microsoft . Vous avez pu voir Copilot répondre aux questions lors d'une partie de Minecraft , donnant à l'utilisateur des conseils sur ce qu'il faut faire avec certains éléments. Il a également guidé l'utilisateur tout au long du montage vidéo dans Clipchamp, en mettant en évidence quelque chose sur son écran. Cette dernière partie, la mise en évidence, n'arrive pas encore dans cette version bêta, mais elle le sera éventuellement.
Microsoft rend également la recherche de fichiers plus naturelle sous Windows. L'application Copilot pourra bientôt vous aider à retrouver des fichiers sur votre PC. Vous pouvez poser des questions telles que « Pouvez-vous trouver mon CV » et Copilot saura quoi chercher. Heureusement, vous pouvez ajuster les autorisations sur ce que Copilot est et n'est pas autorisé à voir.
Selon l'annonce publiée sur le blog Windows de Microsoft, les fonctionnalités sont en cours de déploiement auprès des Windows Insiders aux États-Unis. Cela signifie que nous ne pourrons pas tous les essayer, et que le déploiement de Copilot Vision auprès d’un public plus large pourrait prendre un certain temps.