Par Yusuf Mehdi, Executive Vice President, Consumer Chief Marketing Officer, Microsoft
Aujourd’hui marque une étape importante avec une nouvelle série de mises à jour, permettant à tous les PC sous Windows 11 de bénéficier de la puissance de l’IA, avec Copilot au cœur de l’expérience. Nous rendons l’intelligence artificielle plus accessible en l’intégrant dans les expériences Windows utilisées quotidiennement par les utilisateurs.
Lorsque nous réfléchissons à ce que doit offrir un PC doté de l’intelligence artificielle, trois principales capacités se distinguent :
- Interagir naturellement avec l’utilisateur, par le texte ou la voix, et le comprendre.
- Comprendre ce que l’utilisateur voit pour offrir une assistance guidée
- Agir en son nom.
Le tout avec son autorisation et en s’appuyant sur la sécurité de Windows 11.
Nous sommes convaincus que l’interaction conversationnelle transformera l’utilisation des PC, ouvrant de nouvelles possibilités comme l’ont fait la souris et le clavier.
Jusqu’à présent, la puissance de l’IA reposait généralement sur la capacité des utilisateurs à fournir des prompts précis et complets. Plus le contexte est clair et les détails pertinents, plus la réponse est riche. Cependant, la saisie manuelle de ces informations peut être fastidieuse et chronophage.
Selon une étude, 68 % des consommateurs déclarent utiliser l’IA pour les aider à prendre des décisions, la voix vient simplifier cette expérience.
La force de Copilot Voice et de Copilot Vision réside dans la simplicité de l’interaction. En utilisant le nouveau mot d’activation « Hey Copilot », accomplir une tâche devient aussi simple que de la formuler à voix haute. Et, avec l’autorisation de l’utilisateur, Copilot Vision peut analyser ce qui s’affiche à l’écran pour l’aider à découvrir de nouvelles applications, obtenir des recommandations pour ses projets ou le guider pas à pas.
Depuis son lancement, les premiers utilisateurs de Copilot Vision nous ont impressionnés par leur cas d’usage créatifs – qu’il s’agisse de résoudre des problèmes de configuration, de suivre des instructions étape par étape ou même d’apprendre à utiliser des outils d’édition complexes.
Cette puissance est désormais accessible sur tous les appareils Windows 11 sur lequel Copilot est disponible.
Demander “Hey Copilot” sur Windows 11
Les utilisateurs conversent déjà avec leur PC pour dicter des notes, effectuer des transcriptions ou lancer des recherches. Désormais, le PC comprend véritablement l’utilisateur. Nous observons que lorsque la voix est utilisée, les utilisateurs interagissent deux fois plus avec Copilot que lorsqu’ils écrivent. Preuve qu’avec la voix, tout devient plus fluide et intuitif.
Les nouveaux mots d’activation et de désactivation sont désormais disponibles pour tous les PC Windows 11. Cette fonctionnalité optionnelle offre aux utilisateurs une nouvelle manière de démarrer facilement une conversation avec Copilot Voice.
Pour activer la fonctionnalité, il suffit d’aller dans les paramètres de l’application Copilot et d’activer « Hey Copilot », puis de prononcer simplement « Hey Copilot… ». L’icône du microphone apparaîtra alors et un signal sonore confirmera que Copilot est à l’écoute. La session se termine en disant « Goodbye », en cliquant sur le ‘X’, ou en attendant que Copilot ferme automatiquement la conversation après quelques secondes d’inactivité.
Copilot Vision est disponible dans le monde entier
Copilot Vision est disponible sur tous les marchés où Copilot est proposé, avec les fonctionnalités suivantes :
- Le partage complet du bureau et des applications : lorsque l’utilisateur partage son bureau ou une application, Copilot peut analyser le contenu, fournir les informations et répondre à ses questions tout en le guidant oralement. Il peut, par exemple, aider à perfectionner un CV ou assister pendant la découverte d’un nouveau jeu.
- Highlights : avec Highlights, l’utilisateur peut demander à Copilot « montre-moi comment faire » pour une tâche précise, et celui-ci indiquera directement dans l’application où cliquer et quoi faire. Copilot accompagne ainsi l’utilisateur pour lui donner des conseils lorsqu’il joue à un jeu, l’aide à retoucher une photo en ajustant la lumière pour un rendu optimal, ou encore examine un itinéraire de voyage afin de vérifier si la liste de bagages correspond à la destination.
- Contexte complet dans les applications Word, Excel et PowerPoint : Lorsqu’un utilisateur partage un fichier Word, Excel ou PowerPoint, Copilot Vision est capable d’examiner l’intégralité du document, au-delà de ce qui est simplement affiché à l’écran. Par exemple, si l’utilisateur sollicite l’aide de Copilot pour revoir une présentation PowerPoint, celui-ci peut analyser toutes les diapositives sans qu’il soit nécessaire de toutes les parcourir.
- Texte entrant, texte sortant : bientôt disponible pour la communauté Windows Insiders, cette fonctionnalité va permettre de converser avec Copilot Vision par écrit et de recevoir les réponses de Copilot dans la même fenêtre de conversation. Jusqu’à présent, Copilot Vision ne fonctionnait qu’à la voix. Désormais, que l’utilisateur préfère une interaction écrite ou ne dispose pas de ses écouteurs, Vision proposera une solution adaptée à chaque besoin.
De nouvelles expériences Windows 11, encore plus puissantes, seront bientôt proposées aux membres de Windows Insiders et de Copilot Labs.
L’énergie et l’enthousiasme de la communauté Windows Insider contribuent à façonner l’avenir de Windows depuis plus de dix ans. Aujourd’hui, avec Copilot Labs, nous apportons aux Windows Insiders encore plus de fonctionnalités expérimentales d’l’IA et d’agents intelligents.
Afin de s’assurer que ces nouvelles fonctionnalités correspondent parfaitement aux attentes des utilisateurs, elles seront d’abord proposées en preview via le programme Windows Insider. Les retours obtenus permettront ensuite de les améliorer et de les adapter.
Intégrer Copilot au quotidien des utilisateurs grâce une barre de tâches repensée
Avec la nouvelle fonctionnalité “Ask Copilot ” dans la barre de tâches, Copilot s’intègre naturellement aux usages quotidiens des utilisateurs sur leur PC – toujours prêt à aider, guider et collaborer à n’importe quel moment.
Notre ambition, à la fois simple et ambitieuse, est de faire évoluer la barre de tâches en un centre d’action efficace, qui permet d’en faire plus, plus facilement, transformant chaque interaction quotidienne plus productive et plus agréable. Cette expérience, proposée en option, offre un accès en un clic à Copilot Vision et Copilot Voice, pour une interaction plus naturelle et intégrée au flux de travail. Que l’utilisateur préfère la voix, le texte ou l’assistance guidée avec Copilot Vision, il peut désormais choisir le mode d’interaction qui lui convient le mieux.
Avec des résultats de recherche ultra-rapides et un design repensé, la nouvelle expérience de recherche simplifiée permet de trouver plus rapidement et plus facilement les applications, fichiers et paramètres : les résultats s’affichent et se mettent à jour instantanément au fil de votre saisie.
Cette expérience s’appuie sur les API Windows existantes pour diriger vers les applications, fichiers et paramètres de l’utilisateur, comme dans la recherche Windows classique, sans que Copilot accède à vos données personnelles.
Aperçu des Actions Copilot pour les fichiers locaux dans Copilot Lab
En mai dernier, nous avons annoncé Actions Copilot sur le web — une fonctionnalité permettant à Copilot d’effectuer des actions en votre nom, comme réserver une table dans votre restaurant préféré ou commander des courses en ligne.
Très prochainement, les membres du programme Windows Insiders via Copilot Labs pourront découvrir un mode expérimental de Copilot Actions, conçu pour aller au-delà du navigateur et permettre d’interagir directement avec les fichiers stockés localement sur Windows.
Qu’il s’agisse d’assister l’utilisateur dans le tri de ses photos de vacances ou dans l’extraction d’informations à partir d’un PDF, Actions Copilot peut s’en charger, en s’appuyant sur le contenu disponible sur le PC.
En tant qu’agent polyvalent, il suffit à l’utilisateur de décrire la tâche à accomplir avec ses propres mots, et l’agent tentera de l’exécuter en interagissant avec les applications locales et web. Pendant ce temps, l’utilisateur peut se concentrer sur d’autres activités. À tout moment, il peut reprendre la main, suivre l’avancement ou consulter les actions déjà effectuées.
Nous commencerons avec un nombre limité de cas d’usage, pour optimiser les performances du modèle et enrichir notre apprentissage.
Il est possible que l’agent commette des erreurs ou rencontre des difficultés avec certaines interfaces complexes — c’est pourquoi les tests en conditions réelles sont essentiels pour nous aider à améliorer cette expérience et la rendre toujours plus performante et fluide.
Encore plus de fonctionnalités pour Copilot sur Windows, avec les connecteurs Copilot, la création simplifiée de documents et l’intégration aux paramètres Windows
Les connecteurs Copilot facilitent la connexion des principaux services utilisés par l’utilisateur, tels que ses fichiers OneDrive, ainsi que ses contacts, e-mails et événements de calendrier Outlook. Ils prennent également en charge les services Google comme Google Drive, Gmail, Google Calendar et Google Contacts, permettant leur intégration directe au sein de l’application Copilot sur Windows.
Une fois la connexion activée, Copilot est capable de rechercher et d’analyser les contenus personnels à partir des propres mots de l’utilisateur, ce qui facilite la recherche et la mémorisation d’informations issues des différents services connectés.
Par exemple, vous pouvez demander à Copilot :
- « Trouve les détails de mon rendez-vous chez le dentiste » pour faire apparaître instantanément l’événement correspondant dans votre calendrier.
- « Quelle est l’adresse e-mail de Mary ? » pour obtenir ses coordonnées sans fouiller dans votre boîte de réception.
- « Retrouve mon mémoire d’économie » pour que Copilot effectue une recherche dans OneDrive et propose le document le plus pertinent en quelques secondes.
Il est également possible de demander à Copilot d’exporter ses résultats vers Word, Excel ou PowerPoint, facilitant ainsi la transition vers une utilisation concrète. Par exemple, lorsqu’un utilisateur sollicite Copilot pour l’accompagner dans la réalisation d’un devoir, il peut exporter directement le contenu dans un document mis en forme, une feuille de calcul ou une présentation selon ses besoins.
Enfin, Copilot peut désormais accéder aux Paramètres Windows. Il suffit de poser une question à Copilot au sujet des réglages du PC, avec ses propres mots, pour obtenir un lien direct vers la page de paramètres correspondante. Par exemple, lui demander : “Rends mon écran plus facile à lire” ou “aide-moi à me concentrer en réduisant les distractions”, Copilot vous orientera alors automatiquement vers la section des Paramètres Windows la plus adaptée.
Des actions IA riches et puissantes pour plus de productivité
Nous introduisons de nouvelles actions IA dans Windows, qui permettent d’accomplir encore plus de choses, plus facilement.
Manus est un agent d’intelligence artificielle polyvalent qui réalise diverses tâches sur PC. Avec Manus AI intégré à l’Explorateur de fichiers, l’utilisateur peut facilement accomplir des tâches complexes, comme créer un site web à partir de documents locaux en un clic. Il suffit de sélectionner le document, de faire un clic droit et de choisir « Créer un site web avec Manus »: Manus développera un site web en quelques minutes – sans téléchargement et sans code.
Manus est également disponible en application native sur Windows , permettant ainsi bénéficier de la même assistance intelligente directement depuis une fenêtre de discussion, sans quitter la session. Il suffit de saisir dans l’application : « Utilise les fichiers image présents sur mon appareil et génère un site web professionnel et attrayant.»
Manus exploite les fonctionnalités avancées de la plateforme agentique, disponibles sur Windows – comme le Model Context Protocol – pour identifier les documents appropriés et créer un site web en quelques minutes, sans transférer manuellement les fichiers ni multiplier les clics. Pendant ce temps, l’utilisateur peut poursuivre d’autres tâches : Manus travaille en arrière-plan, de manière sécurisée, pour aider l’utilisateur à les accomplir. Cette expérience est actuellement disponible en preview, et de nouvelles informations seront communiquées prochainement.
Nous introduisons également une nouvelle action IA dans l’Explorateur de fichiers, permettant d’éditer directement des vidéos avec Filmora, pour un montage rapide et fluide.
Enfin, pour les Windows Insiders possédant un Copilot+ PC, nous intégrons Zoom à Actions par clic. Ainsi, il sera bientôt possible de planifier instantanément une réunion Zoom en lançant Actions par clic et en survolant simplement une adresse e-mail visible à l’écran – sans changer d’application, sans copier d’informations, sans interruption. Une façon simple et fluide de rester concentré et d’agir sans quitter votre flux de travail.
Avec Gaming Copilot (bêta) et les ROG Xbox Ally, Xbox et Windows proposent désormais l’IA dans vos sessions de jeu vidéo en mobilité
Xbox et Windows collaborent plus étroitement que jamais pour offrir de nouvelles expériences de jeu. Les joueurs peuvent désormais découvrir Xbox, Windows et Copilot sous un nouveau jour grâce aux ROG Xbox Ally et ROG Xbox Ally X, appareils portables développées en partenariat avec ASUS.
En plus d’offrir un accès rapide à vos jeux Xbox, a votre catalogue de jeux Game Pass et aux jeux PC installés depuis les autres boutiques de jeux PC — le tout au même endroit — il sera désormais possible d’interagir avec Copilot.
En appuyant simplement sur un bouton, les joueurs peuvent accéder à leur assistant de jeu personnel — Gaming Copilot. Il suffit de maintenir le bouton « bibliothèque » enfoncé pour commencer une conversation avec Gaming Copilot et recevoir des conseils, de l’aide ou des recommandations, sans interrompre votre partie.
Sécuriser l’IA sur Windows 11
La sécurité est au cœur de Windows, conformément à l’initiative Secure Future Initiative.
Windows 11 est le système d’exploitation le plus sûr que nous ayons jamais conçu – par conception et par défaut – avec plusieurs couches de protection actives dès le démarrage du PC.
La sécurité n’est pas une simple case à cocher : c’est un engagement continu. Alors que nous présentons de nouvelles expériences agentiques puissantes sur Windows, nous réaffirmons notre volonté de faire évoluer nos protections pour garantir votre confidentialité et votre sécurité.
Nous vous présentons les trois engagements de sécurité que nous prenons avec l’introduction de Actions Copilot, symbolisant une nouvelle avancée dans l’évolution des expériences agentiques sur Windows :
- L’utilisateur garde toujours le contrôle sur ce que Actions Copilot peut faire. Cette fonctionnalité est désactivée par défaut et peut être mise en pause, reprise ou entièrement désactivée à tout moment par l’utilisateur.
- L’utilisateur conserve une visibilité complète sur ce que fait Actions Copilot.
Il peut suivre sa progression et rester informé à chaque étape. Si une décision sensible ou importante doit être prise, Copilot demandera son approbation avant d’agir, afin qu’il reste maitre de ses choix.
Nous l’introduisons de manière responsable. Outre des tests internes approfondis, il est essentiel de garantir la sécurité des utilisateurs en déployant d’abord préversion et en recueillant les retours afin d’ajuster nos dispositifs de sécurité et de protection de la confidentialité.
Pour en savoir plus, consultez la page dédiée à la sécurité des agents IA sur Windows.
Windows s’engage à rester la plateforme la plus performante et la plus sûre pour les expériences agentiques. Nous fournirons plus de détails sur la sécurité des agents sous Windows et les outils de gestion en entreprise lors de Microsoft Ignite le mois prochain.
Nous invitons les utilisateurs à profiter dès aujourd’hui des nouvelles fonctionnalités Copilot sur Windows 11 via une mise à jour du Microsoft Store, et à suivre le blog Windows Insider pour rester informés des prochaines nouveautés du programme.