L’application Gemini reçoit enfin la mise à jour mondiale du projet Astra
Lors du MWC 2025, Google a confirmé que son assistant expérimental Project Astra serait largement déployé en mars. Il semble que la fonctionnalité ait commencé à toucher les utilisateurs, quoique de manière progressive, en commençant par les smartphones Android.
Sur Reddit, un utilisateur a partagé une vidéo de démonstration montrant une nouvelle option « Partager l'écran en direct » lorsque l'assistant Gemini est invoqué. De plus, l'interface Gemini Live a également reçu deux nouvelles options pour la vidéo en direct et le partage d'écran.
Google a également confirmé à The Verge que les fonctionnalités susmentionnées sont désormais sur la trajectoire de déploiement. Jusqu'à présent, Gemini n'a été capable d'avoir une connaissance contextuelle à l'écran que grâce à la fonction « Demander à propos de l'écran ».
Le projet Astra est l'avenir de Gemini AI
Au cas où vous ne seriez pas familier, Project Astra est l'itération la plus futuriste d'une IA capable de comprendre le texte, l'audio, l'image, la vidéo et le flux de caméra en direct en temps réel. Greg Wayne, directeur de recherche de Google Deepmind, l'a comparé à « un petit perroquet sur votre épaule qui traîne avec vous et vous parle du monde ».
Lorsque vous invoquez Gemini et activez l'option Partager l'écran avec Live dans n'importe quelle application, il analysera le contenu à l'écran et répondra aux requêtes basées sur celui-ci. Par exemple, les utilisateurs peuvent lui demander de décrire l'activité en cours dans une application, de décomposer ou de résumer tout article qu'ils lisaient, ou de leur parler de la scène pendant la lecture vidéo.
La capacité la plus impressionnante est le système de compréhension du monde. Lorsque vous passez en mode Live pour Gemini, il affiche désormais une option de flux vidéo qui ouvre la caméra. Dans ce mode, si vous pointez votre caméra vers n'importe quel objet, Gemini pourra voir, comprendre et répondre aux questions en fonction de ce qu'il voit.
Pointer la caméra vers un passage de livre, demander à Gemini d'en dire plus sur un monument, obtenir des conseils sur la décoration ou résoudre des problèmes écrits sur un tableau ou un livre – la mise à niveau Project Astra de Gemini Live peut tout faire. Ce n'est pas très différent de l'intelligence visuelle d'Apple sur les iPhones ou de l' application open source HuggingSnap qui promet une IA de compréhension du monde hors ligne .
Digital Trends a eu droit à une démonstration du projet Astra au MWC plus tôt cette année, donnant ainsi un avant-goût d'une expérience d'assistant IA massivement améliorée sur les smartphones. Il convient de souligner que la mise à niveau du Projet Astra de Gemini Live sera limitée aux clients qui paient pour un abonnement Gemini Advanced.
Il semble que l'ampleur du déploiement de cette mise à jour du projet Astra ne soit pas trop large pour le moment. J'ai un abonnement Gemini Advanced via l'offre Google One AI Premium, mais je ne le vois pas encore sur aucun de mes téléphones Pixel exécutant la dernière version stable d'Android 15 ou la version bêta d'Android 16.