Windows AI Copilot sera-t-il l’outil d’accessibilité PC ultime ?

Une capture d'écran de Windows Copilot utilisé dans la barre latérale.

Lors de la Build 2023, Microsoft a fait toute une histoire à propos de son annonce en tête d'affiche, le Windows Copilot . L'idée est simple : intégrer l'IA directement dans le système d'exploitation. De la même manière que le navigateur Edge (et bientôt toute la pile d'applications Office ) ont leurs propres copilotes IA, maintenant Windows en aura un aussi.

Mais en discutant avec le chef du groupe Windows (et Surface) de Microsoft, Panos Panay, j'ai voulu approfondir un autre cas d'utilisation possible de l'IA générative en tant qu'outil d'accessibilité. Il n'a pas été présenté de cette façon, en particulier, mais avoir accès à un assistant virtuel qui est en fait intelligent intégré directement dans le système d'exploitation de l'ordinateur semble certainement avoir une valeur sérieuse en termes d'accessibilité.

Quand j'ai interrogé Panay à ce sujet, il était enthousiaste à l'idée. "J'ai tellement de passion dans cet espace. Lorsque Copilot commence à se présenter, vous commencez à réaliser, quel que soit votre mode de saisie, que cela fonctionne pour vous. »

Microsoft n'est pas nouveau dans le monde de l'accessibilité – en fait, la société a récemment renforcé son offre de toutes sortes de façons, qu'il s'agisse de fonctionnalités dans Windows comme Live Captions ou de ses accessoires modulaires adaptatifs . Mais avec Windows Copilot, il existe une nouvelle opportunité de tout rassembler.

Panos Panay à Microsoft Build 2023.

Maintenant, il y a toujours eu une fonction de recherche de base dans Windows, mais la rendre hyperintelligente fait beaucoup pour la transformer en l'outil d'accessibilité ultime. En particulier, le copilote Windows pourrait aider ceux qui ont du mal à faire fonctionner pleinement leur ordinateur d'une manière ou d'une autre.

"Lorsque vous pensez à l'accessibilité, qu'il s'agisse d'un problème de dextérité ou si vous souhaitez utiliser la voix ou uniquement écrire ou uniquement taper – quel que soit le mode de saisie – le copilote le prendra", a déclaré Panay.

Pouvoir contrôler votre système d'exploitation entièrement à partir du copilote Windows via la voix ou le texte semble être une fonctionnalité extrêmement bénéfique pour certains. Mais l'avantage encore plus large de Windows Copilot est une fonction de découverte.

"Imaginez ce que vous pouvez faire pour activer chaque fonctionnalité d'accessibilité dans Windows", a déclaré Panay. « Il y a des choses que nous faisons juste devant vous pour l'accessibilité, mais il y a tellement de choses là-dedans qui sont uniques à chaque personne. Imaginez si vous pouviez simplement l'appeler.

Panay a mentionné la richesse des options d'accessibilité déjà intégrées à Windows, qu'il s'agisse de la loupe, des filtres de couleur, du narrateur, des sous-titres en direct, de la traduction ou même des touches collantes. Mais le problème est que de nombreuses personnes susceptibles de bénéficier de l'une ou de certaines de ces fonctionnalités pourraient ne pas savoir qu'elles existent. En théorie, vous pourriez demander que le copilote vous aide avec quelque chose, et cela vous orienterait automatiquement dans la bonne direction. Vous n'auriez pas à fouiller dans les paramètres pour voir si une telle chose existe même.

Nous devrons attendre d'avoir utilisé Windows Copilot nous-mêmes pour voir à quel point il est bon dans ces domaines, mais pour l'instant, c'est certainement prometteur.