Microsoft a déployé une mise à jour majeure de Copilot Vision qui lui permet de visualiser l'ensemble de votre bureau, d'offrir une assistance en temps réel et de répondre aux invites vocales en utilisant le contexte à l'écran. Cet outil d'IA offre une aide en temps réel pendant toute activité sur le bureau. Cette fonctionnalité est actuellement déployée auprès des Windows Insiders via une mise à jour de l'application.En novembre 2024, Microsoft a annoncé l'arrivée d'une nouvelle fonctionnalité IA "Copilot Vision". La fonction Copilot Vision de Microsoft serait capable de voir exactement ce que vous voyez, de prendre le contrôle de votre navigateur, de répondre à des questions sur son contenu et de faire des suggestions. L'assistant IA aide les utilisateurs à comprendre les pages web et à répondre aux questions qui s'y rapportent. Les sessions sont facultatives et temporaires, et les données ne seraient pas conservées une fois la session terminée.
Récemment, Microsoft a commencé à déployer une nouvelle mise à jour de son application Copilot pour Windows qui permet à l'assistant IA de visualiser et d'analyser tout ce qui se trouve sur votre écran. Cette nouvelle fonctionnalité, qui fait partie d'une mise à niveau de Copilot Vision, signifie que l'outil peut désormais scanner l'intégralité de votre bureau ou des fenêtres d'applications spécifiques et offrir une aide en temps réel, à l'instar d'un copilote numérique très attentif.
Selon le blog officiel Windows de Microsoft, la fonctionnalité Desktop Share permet aux utilisateurs de partager activement leur travail avec Copilot en cliquant sur une icône en forme de lunettes dans le compositeur. Qu'il s'agisse d'aide pour réécrire un CV, de conseils pour éditer un projet créatif ou d'astuces pour jouer à un nouveau jeu, Copilot Vision peut désormais voir ce que vous voyez et vous guider.
"Lorsque vous partagez votre bureau (ou toute fenêtre de navigateur ou d'application spécifique), Copilot peut voir ce que vous voyez et vous en parler en temps réel", explique Microsoft dans son article de blog. "Il peut vous aider à analyser le contenu, vous fournir des informations et répondre à vos questions, en vous guidant à voix haute."
Cette fonctionnalité fonctionne également dans le cadre d'interactions vocales. Si vous parlez à Copilot et que vous souhaitez qu'il « voie » ce sur quoi vous travaillez pour obtenir plus de contexte, il vous suffit d'activer Vision en cliquant sur l'icône en forme de lunettes au milieu de la conversation.
Cette fonctionnalité diffère de la fonctionnalité controversée Recall de Microsoft, qui était conçue pour prendre automatiquement des instantanés réguliers de l'écran d'un utilisateur en arrière-plan. En revanche, l'affichage du bureau de Copilot Vision s'apparente davantage à un partage d'écran lors d'un appel vidéo, où les utilisateurs doivent l'activer activement et peuvent arrêter le partage à tout moment en cliquant sur « Arrêter » ou sur le bouton « X ».
La mise à jour, version 1.25071.125 ou supérieure, est déployée via le Microsoft Store aux utilisateurs du programme Windows Insider. Microsoft indique qu'elle est initialement disponible sur les marchés où Windows Vision est activé, et que tous les utilisateurs ne l'obtiendront pas immédiatement, car le déploiement est progressif. Actuellement, Copilot Vision n'est disponible que pour les utilisateurs américains disposant d'un appareil fonctionnant sous Windows 10 ou Windows 11. Cette fonctionnalité n'est actuellement pas disponible en Inde.
Microsoft teste Copilot Vision depuis l'année dernière, en le limitant à l'origine à l'analyse des pages web dans le navigateur Edge. Avec ce déploiement plus large, la société positionne Copilot comme un assistant IA plus pratique, avec l'ambition de l'intégrer profondément à l'ensemble de l'expérience Windows, y compris le travail sur ordinateur de bureau et la saisie par caméra mobile.
Pour rappel, en 2025, Microsoft se positionne comme l’un des leaders mondiaux de l’intelligence artificielle, aussi bien sur le plan technologique qu’économique. Mais derrière les annonces triomphales de gains de productivité et d’optimisation des processus, une autre réalité émerge : celle de milliers d’emplois supprimés. Alors que la firme vante plus de 500 millions de dollars d’économies annuelles grâce à l’IA, elle procède parallèlement à des vagues de licenciements massives qui alimentent un débat croissant sur les véritables conséquences de l'automatisation à grande échelle.
Voici les informations partagées par Microsoft concernant Copilot Vision :
Qui peut accéder à Copilot Vision ?
Microsoft a étendu Copilot Vision sur Microsoft Edge, iOS, Android et l’application Windows. Les utilisateurs gratuits âgés de 18 ans ou plus qui sont connectés à Copilot avec un compte Microsoft peuvent désormais essayer Copilot Vision sur Edge, iOS, Android et l’application Windows, tandis que les abonnés à Copilot Pro bénéficieront de limites d’utilisation plus élevées. Copilot Vision est actuellement disponible aux États-Unis (à l’exception de l’Illinois et du Texas) et sera bientôt déployé sur d’autres marchés.
Comment accéder à Copilot Vision dans Edge ?
Ouvrez le navigateur Edge sur votre bureau. Vérifiez que vous êtes connecté à votre compte Microsoft personnel. Dans votre fenêtre de navigateur Edge, cliquez sur l’icône Copilot dans le coin supérieur droit pour ouvrir Copilot dans le volet latéral. Ensuite, appuyez sur l’icône de microphone en bas du volet latéral pour commencer une session avec Vision. Le compositeur Copilot affiche une icône de lunettes indiquant que Vision est désormais active. Veuillez noter qu’il n’existe plus de point d’entrée inférieur pour Vision dans votre navigateur Edge.
Comment accéder à Copilot Vision dans une application Android ou iOS ?
Vérifiez que vous êtes connecté à votre compte Microsoft personnel. À partir de votre...
La fin de cet article est réservée aux abonnés. Soutenez le Club Developpez.com en prenant un abonnement pour que nous puissions continuer à vous proposer des publications.
