Brief IA : Google déploie le contrôle d'applications par Gemini sur Mac

Google déploie le contrôle d'applications par Gemini sur Mac

Brief IA
Tom Levy·2 min

Gemini sur Mac peut effectuer des clics et saisir du texte dans des applications locales ou web. Le déploiement commence en anglais américain pour les abonnés Google AI Plus, Pro et Ultra. L'utilisateur choisit les applications autorisées et peut arrêter l'assistant à tout moment.

En bref
1Gemini sur Mac peut effectuer des clics et saisir du texte dans des applications locales ou web.
2Le déploiement commence en anglais américain pour les abonnés Google AI Plus, Pro et Ultra.
3L'utilisateur choisit les applications autorisées et peut arrêter l'assistant à tout moment.
Pourquoi c'est important : Gemini peut prendre en charge des étapes dans des logiciels et des sites qui ne disposent pas de connexion entre eux.

Google commence aujourd'hui à déployer le pilotage d'applications locales ou web dans Gemini sur Mac, en anglais américain, auprès des abonnés Google AI Plus, Pro et Ultra. L'assistant peut effectuer des clics et saisir du texte pour réaliser des opérations en plusieurs étapes.

Comment activer le contrôle des applications

Pour solliciter ce mode, la requête doit contenir la mention @Computer use. Le menu Personnaliser > Connecteurs accueille des applications identifiées par le libellé « Desktop », notamment Blender et Autodesk Fusion. Elles s'ajoutent aux intégrations de Git et d'Obsidian.

Des usages pour la création, les formulaires et la revente

Google présente cette capacité comme un gain de temps pour les tâches réparties entre logiciels et sites dépourvus de connexion entre eux. Dans la création, l'entreprise évoque aussi bien la colorisation de photos par lots que le paramétrage de scènes 3D complexes. Elle propose également de récupérer dans des PDF locaux des poids, dimensions et adresses, puis de les reporter dans les différents champs de devis d'expédition.

La lettre du soirGratuit · 19 h

Vous voulez les meilleurs outils IA avant les autres ?

On teste et on décrypte les nouveaux outils IA chaque soir, en 5 min. Gratuit.

Inclus dès l'inscription : notre sélection des meilleurs guides & comparatifs IA.

Choisissez votre rythme

Gratuit · Pas de spam · Désabonnement en 1 clic

Autre scénario avancé par Google : rassembler des indicateurs et des captures de tableaux de bord actualisés en direct, couvrant plusieurs régions, puis produire une présentation Google Slides. Pour la revente de vêtements, l'assistant pourrait examiner des photos conservées dans un dossier local, chercher des prix, consigner les caractéristiques des articles et préparer plusieurs annonces.

Une fenêtre isolée et des pauses pour les actions sensibles

Jusqu'à cette mise à jour, Task, auparavant nommé Gemini Spark, ne pouvait accéder aux fichiers locaux qu'en association avec des applications connectées telles que Gmail ou Google Calendar. L'assistant peut désormais parcourir des menus ou renseigner des formulaires dans les logiciels du Mac comme dans les applications web.

Les opérations s'effectuent dans une fenêtre séparée et isolée, en arrière-plan ; leur déroulement est visible en direct dans la conversation. Le curseur et l'écran principal restent disponibles pour d'autres activités. L'utilisateur sélectionne les applications autorisées et peut interrompre l'exécution par un clic à n'importe quel moment.

Google prévoit des pauses lors des étapes de connexion ou de paiement. Une validation est requise pour les opérations sensibles.

Suivez Brief IA

L'actu IA du jour, aussi dans votre fil.

Commentaires