Tech • IA • Robotique • Jeu
Google New Gemini Skillz Turn Chrome Into an AI Beast
8/10INTRO
Google a dévoilé une série d’innovations majeures en intelligence artificielle, intégrant l’IA à Chrome, améliorant la robotique DeepMind, développant des outils d’évaluation des compétences humaines et enrichissant son écosystème Gemini Enterprise pour des workflows automatisés.
POINTS CLÉS
Google Skills dans Chrome avec Gemini
Lancé le 14 avril 2026, cette fonction permet de transformer des invites répétitives en workflows réutilisables et multi-onglets dans le navigateur. Disponible sur Mac, Windows et Chrome OS (langue EnglishUS obligatoire), elle offre un système de gestion de prompts intégré via une interface utilisateur simple. Les utilisateurs peuvent déclencher une tâche en un clic, même simultanément sur plusieurs pages web, comme comparer plusieurs produits. Google y ajoute une bibliothèque pré-construite comprenant des compétences comme l’analyse d’ingrédients, la sélection de cadeaux et la synthèse de documents, exposant ainsi le concept de gestion de prompts à tous, au lieu de le limiter aux développeurs.
Sécurité et contrôle utilisateur
Google a mis en place des confirmations manuelles pour les actions sensibles (ex. envoi d’e-mails, création de rendez-vous) afin de garantir que les workflows automatisés n’exécutent pas d’actions irréversibles sans consentement. Le tout s’appuie sur le modèle de sécurité robuste déjà intégré dans Chrome, avec red teaming automatique et mises à jour continues.
Vers des agents navigateurs intelligents
Skills pose la première pierre des agents persistants dans un navigateur, avec une exécution multi-onglets et des workflows réutilisables. Google prépare manifestement un agent logiciel plus poussé, intégré à un futur environnement desktop Gemini, évoquant un système complet d’automatisation au-delà du simple chat IA.
Gemini Enterprise: agent tab
Google teste une interface « agent tab » pour Gemini Enterprise, qui ressemble à un espace de travail multiphases. On y trouve un chat dédié, mais aussi un panneau latéral listant objectifs, agents impliqués, applications connectées, documents, et une option cruciale « require human review » permettant un contrôle humain avant l’exécution finale. Ce dispositif est comparable à Claude Co-work, mais avec un focus plus prononcé sur l’exécution sécurisée de workflows complexes.
Notebook LM avec Canvas et connecteurs
Google enrichit Notebook LM d’une couche visuelle appelée Canvas, pour transformer les données en timelines, pages interactives et mini-applications. Par ailleurs, les nouveaux connecteurs permettront d’importer automatiquement des données depuis d’autres services, notamment l’écosystème Google, faisant de Notebook LM une plateforme centrale de recherche et gestion de données. L’automatisation de l’étiquetage par Gemini améliore aussi l’organisation des sources, facilitant la navigation dans de larges bases documentaires.
DeepMind Gemini Robotics ER 1.6
Mise à jour majeure du modèle de raisonnement incarné pour la robotique réelle, cette version améliore le raisonnement spatial (pointage, comptage, relations entre objets), crucial pour éviter les erreurs d’interprétation. Elle renforce aussi la détection de succès en combinant différents flux visuels adaptés à des environnements dynamiques et obscurcis. La nouveauté la plus impressionnante est la capacité à lire des instruments analogiques et numériques (manomètres, jauges) via « agentic vision », technologie qui analyse en détail pour décoder aiguilles et unités avec une fiabilité record.
Collaboration avec Boston Dynamics
Gemini Robotics ER 1.6 a été développé conjointement avec Boston Dynamics et son robot Spot, capable d’explorer un site, capturer des images et les analyser pour interpréter des lectures d’instruments. Ce progrès élève le taux de réussite de la lecture d’instruments à 86%, et jusqu’à 93% avec la vision agentique activée, contre seulement 23% pour la version 1.5.
Google Research Vantage: évaluation des compétences humaines
Ce système est conçu pour mesurer des compétences complexes comme la créativité, la collaboration et la pensée critique, traditionnellement difficiles à évaluer par des tests standardisés. Un « executive LLM » orchestre plusieurs agents IA dans des conversations contrôlées, orientant les discussions pour tester des compétences spécifiques telles que la résolution de conflits ou la gestion de projet.
Tests et résultats
Expérimenté avec 188 participants et 373 conversations, Vantage a obtenu des taux d’évidence très élevés (jusqu’à 92,4% en gestion de projet, 85% en résolution de conflits). Son système de notation égalise la fiabilité des évaluateurs humains, avec des scores de corrélation jusqu’à 0.88 en créativité, ce qui est exceptionnel pour des jugements subjectifs.
Simulation et interprétabilité des résultats
Vantage utilise Gemini pour simuler des utilisateurs avec différents niveaux de compétence, montrant une plus grande précision que les agents indépendants et fournissant des cartes des compétences claires, associant les performances à la structure des conversations. Cela ouvre la voie à des évaluations automatiques et explicables avant applications humaines coûteuses.
Initiative Higsfield: workflow IA doublé d’une division
Le workflow recommandé combine Claude pour la planification et la rédaction, avec Cedance 2 pour la production vidéo, séparant ainsi réflexion créative et exécution technique. Cedance 2 garantit une production audiovisuelle de qualité cinématographique avec une cohérence accrue, illustrant une démarche de spécialisation par modèle IA adaptée à la création de contenu.
Perspectives globales
Toutes ces évolutions (Skills dans Chrome, agents Gemini Enterprise, Notebook LM, avancées robotics et Vantage) suggèrent que Google tend vers un système d’IA intégré, autonome et multifonctionnel, mêlant productivité, automatisation sécurisée et évaluation qualitative des talents humains. La stratégie englobe le cloud, le desktop, la robotique physique et l’analyse sociale, plaçant Google en posture de leader pour la prochaine génération d’outils IA.
Cette synthèse montre que Google investit massivement dans un écosystème cohérent visant à transformer l’IA d’un simple outil à un véritable moteur de workflows intelligents, à la fois dans le logiciel, la robotique et l’évaluation qualitative humaine.
Explique-moi