Google ajoute le « computer use » à l’application Gemini pour macOS. Autrement dit, l’IA peut désormais effectuer des tâches à la place de l’utilisateur, en naviguant dans les applications natives du Mac et en parcourant des sites web en arrière-plan.
La fonction est lancée en anglais, aux États-Unis uniquement, et réservée aux abonnés Google AI Plus, Pro ou Ultra. Google n’a pas indiqué de date d’extension à d’autres pays ou à d’autres plateformes.
Avec cette nouveauté, Google rejoint un mouvement déjà engagé par plusieurs acteurs majeurs de l’IA, dont OpenAI, Anthropic et Meta, qui proposent depuis quelque temps des fonctionnalités agentiques dans leurs applications de bureau. Le groupe de Mountain View accuse donc un certain retard sur ce terrain, mais cherche désormais à faire de Gemini un assistant capable d’agir concrètement sur l’ordinateur.
Gemini peut naviguer entre les applications et le Web
L’agent peut enchaîner des tâches en plusieurs étapes qui mêlent fichiers locaux, applications et web. Google cite plusieurs exemples : remplir des formulaires, répéter la même opération sur un lot de fichiers, classer des fichiers dans des dossiers selon des critères précis, ou créer des diaporamas à partir de fichiers ou de données issues de tableaux de bord en ligne.
Un aperçu en direct, sans bloquer l’écran
Pendant l’exécution, l’utilisateur voit l’agent travailler dans un aperçu en direct, au sein du chat. Son écran et son curseur restent libres pour d’autres activités : le Mac n’est donc pas bloqué pendant que Gemini travaille.
Cette approche limite la frustration d’attendre devant une machine occupée, mais elle impose aussi de rester attentif à ce que fait l’agent, d’où l’importance des contrôles prévus.
Des tâches répétitives automatisées sur Mac
Google met particulièrement en avant les opérations fastidieuses et les workflows répétitifs. Gemini pourrait notamment remplir des formulaires, reproduire une même manipulation sur plusieurs fichiers ou organiser automatiquement des documents dans des dossiers en fonction de critères définis.
L’assistant pourrait aussi créer des présentations à partir de fichiers locaux ou d’informations extraites de tableaux de bord en ligne. L’objectif est de réduire le temps consacré aux tâches administratives et aux manipulations répétitives, sans obliger l’utilisateur à passer manuellement d’une application à l’autre.
Cette évolution s’ajoute aux autres initiatives agentiques de Google. L’entreprise a récemment élargi le déploiement de Gemini Tasks, une fonction capable d’aider les utilisateurs à se connecter à des sites, effectuer des achats en ligne ou prendre des rendez-vous. Elle a également commencé à accueillir les premiers testeurs de CC, son agent IAL'IA agentique désigne les systèmes d'intelligence artificielle capables de planifier puis d'exécuter eux-mêmes des tâches complexes — réserver, coder, naviguer sur le Web, piloter des logiciels — plutôt que de se contenter de répondre à une question. Lire la fiche annoncé en septembre et conçu pour aider les familles à organiser leurs activités à partir de leurs e-mails, calendriers, conversations et tâches.
Des contrôles prévus, des zones d’ombre
L’utilisateur peut mettre en pause, arrêter et approuver les actions de Gemini avant leur exécution. C’est un garde-fou essentiel pour un agent qui touche à des fichiers locaux et à des applications.
L’article ne précise toutefois pas d’autres mesures de sécurité, ni la manière dont les données personnelles sont gérées. Deux points à surveiller de près, alors que les agents capables d’agir sur un ordinateur ouvrent des possibilités importantes mais augmentent aussi les risques en cas d’erreur ou de mauvaise interprétation d’une consigne.
Google arrive après les autres
Le contrôle de l’ordinateur dans Gemini est d’abord proposé en anglais aux États-Unis. Il nécessite l’application Gemini pour Mac ainsi qu’un abonnement Google AI Plus, Pro ou Ultra.
Google n’a pas encore communiqué de calendrier pour une disponibilité dans d’autres pays ou sur d’autres plateformes. Les utilisateurs français devront donc patienter avant de pouvoir tester cette nouvelle capacité.
Avec cette fonctionnalité, Google franchit une étape supplémentaire dans sa stratégie autour des agents IA. Gemini ne se limite plus à générer du texte ou à répondre à des questions : il peut désormais intervenir directement dans l’environnement de travail de l’utilisateur. Reste à voir si cette approche saura convaincre face aux solutions déjà proposées par ses concurrents.