Lors du Mobile World Congress (MWC) de cette année, Google a annoncé de nouvelles fonctionnalités pour son assistant Gemini : l'analyse vidéo en temps réel et le partage d'écran. Les abonnés Google One AI Premium à Gemini Advanced seront les premiers à pouvoir profiter de ces nouvelles fonctionnalités, dès la fin du mois.
Cette mise à jour confère à Gemini Live deux capacités essentielles : premièrement, l'analyse en temps réel du contenu vidéo via une caméra externe ; deuxièmement, le partage d'écran, permettant à l'assistant IA d'interpréter directement les informations affichées sur le téléphone de l'utilisateur et de fournir des réponses. Grâce à ces fonctionnalités, les utilisateurs peuvent interagir visuellement avec l'IA de manière plus interactive, par exemple en demandant à l'IA d'identifier des objets, d'analyser le contenu de l'écran ou de fournir des suggestions en temps réel.
Ces nouvelles fonctionnalités seront d'abord disponibles sur les appareils Android et prendront en charge plusieurs langues. Google a démontré sur place au MWC l'intégration de ces fonctionnalités sur divers appareils Android, renforçant ainsi sa position concurrentielle dans le domaine des assistants IA.
Cette mise à jour marque également une étape clé vers une interaction plus réaliste avec les assistants IA. L'objectif à long terme de Google est Project Astra, un assistant IA multi-modal universel capable de traiter en temps réel du texte, de la vidéo, de l'audio et disposant d'une mémoire à court terme. Astra devrait à l'avenir être étroitement intégré à des outils tels que la recherche Google, Lens et Maps.
Avec le lancement de Gemini Live, la concurrence entre Google et OpenAI s'intensifie. Depuis décembre dernier, ChatGPT prend en charge le partage d'écran et la vidéo en temps réel avec un mode vocal avancé. La mise à jour de Google est sans aucun doute une réponse directe. Il reste à voir si Gemini pourra, grâce à cette nouvelle fonctionnalité, consolider sa position de leader en matière d'IA.