Google a lancé des fonctionnalités révolutionnaires pour Gemini Live, permettant à l’IA de « voir » ce que vous voyez via votre écran ou caméra et d’y répondre instantanément. Découvrez comment cette avancée ouvre la voie à une interaction plus fluide et naturelle avec votre smartphone, transformant votre expérience numérique au quotidien.
Google Gemini Live : l’IA qui voit et répond en temps réel
Par Zineb Mouhoubi
Publié le 24/03/2025 à 16:30
Google a introduit de nouvelles fonctionnalités pour Gemini Live, permettant à l'IA de « voir » ce qui se passe sur l'écran du smartphone ou via sa caméra et d'y répondre en temps réel. Cette avancée, issue du projet Astra, transforme l'interaction entre l'IA et l'utilisateur. Les abonnés Google One AI Premium peuvent déjà profiter de ces capacités, mais elles sont encore limitées à certains utilisateurs. Cette fonctionnalité positionne l'IA face à une concurrence accrue, marquant un tournant dans l’assistance numérique.
Gemini Live : l'IA qui comprend ce que vous voyez
La grande nouveauté apportée par cette mise à jour de Gemini Live est la capacité de l'IA à analyser ce qui se trouve sur l'écran du smartphone. Concrètement, les utilisateurs peuvent désormais interagir avec Gemini et lui poser des questions sur le contenu visible, que ce soit sur une page web ou dans une application. Par exemple, si un utilisateur consulte une page Wikipédia sur le produit intérieur brut (PIB), il peut demander à Gemini de résumer les informations ou d'expliquer les termes économiques complexes.
Par ailleurs, l'intelligence artificielle ne se contente pas de répondre à des questions simples ; elle comprend le contexte de l'écran et peut fournir des réponses personnalisées adaptées à ce qu'elle « voit ». Cette fonctionnalité s'apparente à un assistant plus interactif et plus intelligent, capable de lire et d’interpréter ce qui se passe dans les applications ou les navigateurs en temps réel, une capacité que Google appelle « screen-reading ».
It looks like the promised Project Astra features are beginning to roll out for Gemini Live, essentially giving eyes to Gemini. https://t.co/rOMwzCQGss pic.twitter.com/5Ny5MR0YLR
— Chrome Unboxed (@chromeunboxed) March 23, 2025
L'innovation d'Astra : un pas vers l'assistance vidéo en direct
En parallèle de cette fonction de lecture d'écran, Google Gemini propose également une fonctionnalité de vidéo en temps réel qui permet à l'IA de répondre à des questions sur ce qui est capturé par la caméra du smartphone. Par exemple, un usager pourrait utiliser cette fonctionnalité pour demander à Gemini de l'aider à choisir une couleur de peinture en lui montrant une céramique. L'IA analyse le flux vidéo et fournit des recommandations en fonction de ce qu'elle « voit ».
D'autre part, Google a d'abord démontré cette capacité dans des vidéos promotionnelles et l’a maintenant mise à disposition pour les abonnés de Gemini Advanced, dans le cadre du plan Google One AI Premium. Ces nouvelles options renforcent l'engagement de Google à développer des assistants intelligents plus réactifs et polyvalents, qui vont au-delà des simples commandes vocales et peuvent véritablement comprendre et interagir avec leur environnement visuel.
🚀 Google rivoluziona l’AI con Gemini Live: ora può “vedere” in tempo reale ciò che appare sullo schermo o dalla fotocamera del tuo smartphone! 🔍📱 Scopri come questa innovazione cambierà l’assistenza digitale. #Google #GeminiLive #AI #TechNews
— TimeToTech.it (@timetotech.bsky.social) 24 mars 2025 à 10:57
En déployant progressivement ces fonctionnalités, Google a non seulement amélioré l’interactivité de Gemini Live, mais aussi pris une longueur d'avance dans la compétition contre des entreprises comme Amazon et Apple, qui travaillent sur des améliorations similaires pour leurs propres assistants vocaux.