Google publie ARTEMIS, un Android piloté par des agents IA

Google met en libre accès ARTEMIS, un framework qui permet à des agents d’IA de conduire des actions sur un smartphone Android, réel ou émulé, via MCP. Le projet affiche un taux de réussite de 99 % sur un benchmark interne, tout en faisant l’objet d’une contestation sur l’attribution de code et d’un signalement de faille en cours de correction.

Un succès auto-déclaré et deux points de vigilance

Google revendique plus de 99 % de réussite pour ARTEMIS sur AndroidWorld, un benchmark qui couvre plus d’une centaine de tâches Android en plusieurs étapes. Ce chiffre est annoncé par les responsables du projet et n’a pas été vérifié par une entité indépendante. De plus, la startup Minitap indique avoir retrouvé dans ARTEMIS des composants provenant de son projet open source mobile-use, notamment du code ainsi que des prompts. Le fichier README d’ARTEMIS fait désormais mention explicitement de l’intégration de code développé par Minitap. Un autre point de vigilance concerne un problème de sécurité signalé sur GitHub, qui fait état d’un risque potentiel d’injection de commandes à travers certains paramètres transmis aux fonctions ADB. En l’absence d’intégration et de validation du correctif, ARTEMIS doit être considéré comme expérimental et réservé à des appareils destinés aux tests.

Des agents capables de lire l’écran et d’enchaîner des actions

Une fois ARTEMIS installé, il peut observer l’interface d’un smartphone Android, ouvrir des applications, appuyer sur des boutons, saisir du texte et passer d’une application à l’autre. Des agents comme Claude Code, Codex, Antigravity ou OpenClaw peuvent ainsi naviguer dans les apps et exécuter des séquences d’actions. Contrairement à un simple script de clics, l’agent peut analyser l’écran et déterminer lui-même comment atteindre l’objectif fixé. Google illustre cette capacité avec un exemple où ARTEMIS prépare plusieurs itinéraires dans Google Maps, calcule leur durée totale, puis bascule sur YouTube pour lancer un morceau. Deux modes sont proposés : Flash, qui privilégie la rapidité, et Pro, qui ajoute davantage de planification et de vérification.

Des scénarios conçus pour les équipes de test Android

Le framework cible principalement les développeurs et les équipes de test d’applications Android. Il permet d’installer une nouvelle version d’une application, de reproduire un bug, de parcourir plusieurs écrans et de collecter automatiquement des captures d’écran et des journaux en cas de problème. Ces fonctions couvrent des étapes essentielles des cycles de test sur Android.

ARTEMIS permet à une IA d’effectuer des actions sur Android grâce à MCP

D’autres systèmes permettent déjà à une IA d’agir sur un smartphone, comme Gemini qui exécute certaines tâches multi-étapes dans des applications Android, ou Claude qui interagit avec plusieurs fonctions et apps du téléphone. Il existe également des solutions tierces permettant de contrôler un appareil à distance. La spécificité d’ARTEMIS réside dans sa capacité à faire d’un smartphone Android un outil polyvalent accessible à plusieurs agents externes via MCP, sans être limité à un seul assistant. Claude Code, Codex, Antigravity, Cursor, Windsurf ou OpenClaw peuvent alors confier des tâches directement à ARTEMIS.

Open source, déploiement sur appareil réel ou émulé et service d’accessibilité

ARTEMIS est proposé par Google comme un framework open source sous licence Apache 2.0, initialement conçu pour l’automatisation de tests Android, mais dont le serveur MCP élargit les usages possibles. Il est compatible aussi bien avec un smartphone Android physique relié à un ordinateur qu’avec un appareil virtuel exécuté dans un émulateur. Lors de la première utilisation, ARTEMIS procède à l’installation d’un service d’accessibilité spécifique, accessible dans les paramètres et signalé par une notification permanente, qui autorise la lecture de la structure de l’interface ainsi que l’interaction avec les éléments affichés à l’écran.