Google ajoute des fonctionnalités d'utilisation informatique à l'application Mac de Gemini

Google LLC a publié aujourd'hui une nouvelle version du client Mac de Gemini qui peut interagir avec d'autres applications sur l'ordinateur de l'utilisateur.

La fonctionnalité est disponible aux États-Unis dès le lancement. Il nécessite un abonnement Google AI, qui équipe les comptes Google grand public d'une gamme plus large d'outils d'intelligence artificielle. L'offre comprend également un espace de stockage supplémentaire et certaines autres fonctionnalités.

Les utilisateurs peuvent demander à Gemini de lancer une application locale en incluant la commande « @Computer use » dans leurs invites. Par exemple, un concepteur pourrait télécharger le croquis d’un véhicule et demander à l’assistant IA de le transformer en une animation tridimensionnelle. Gemini trouve l'application locale nécessaire à la tâche, crée un plan de projet et exécute le travail étape par étape.

L'assistant prend en charge des tâches qui comprennent des dizaines d'actions. De plus, les consommateurs peuvent utiliser le résultat d'un flux de travail Gemini récemment terminé pour lancer des projets de suivi. Un utilisateur peut demander à l'assistant de générer un élément visuel dans un outil de conception, puis de le transformer en mini-application avec Visual Studio Code.

Gemini peut interagir non seulement avec les applications locales mais également avec les services Web. Cela signifie qu'il peut charger des données de pages Web dans des programmes exécutés sur la machine de l'utilisateur, ainsi que déplacer des données dans la direction opposée et entre les services cloud.

L'IA effectue son travail dans une fenêtre en arrière-plan. Ainsi, les utilisateurs n'ont pas besoin de suspendre leur travail pendant que l'assistant est en cours d'exécution. Ils peuvent suivre les flux de travail Gemini via un volet de prévisualisation intégré à la fenêtre de discussion du client Mac. De plus, Google a inclus des contrôles qui permettent de donner des commentaires à Gemini en cours de tâche.

« La confidentialité et la sécurité sont intégrées : vous choisissez les applications auxquelles Gemini peut accéder, regardez chaque étape en direct, faites une pause à tout moment et approuvez les actions clés avant qu'elles ne se produisent », a écrit Michael Friedman, chef de produit du groupe Google pour l'application Gemini. article de blog.

La version Mac de Muse, l'agent IA récemment lancé par Meta Platforms Inc., peut également interagir avec les applications et les données locales. De plus, une machine virtuelle basée sur le cloud lui permet d'effectuer des tâches même lorsque l'ordinateur de l'utilisateur est hors ligne. Dots, un service concurrent d'OpenAI Group PBC, offre une fonctionnalité similaire.

Google pourrait chercher à égaler les fonctionnalités d'hébergement de flux de travail basées sur le cloud de ses concurrents à l'avenir. L'entreprise peut également étendre Gemini par d'autres moyens. Notamment, cela pourrait amener le mode d'utilisation informatique de Gemini à des systèmes d'exploitation supplémentaires et ajouter des fonctionnalités pour les utilisateurs professionnels. Dots d'OpenAI inclut déjà des fonctionnalités conçues pour automatiser les flux de travail commerciaux tels que les achats.

Newsletter

Rejoignez notre newsletter pour des astuces chaque semaine