Dans le domaine de l'intelligence artificielle, Google DeepMind a lancé aujourd'hui un nouveau produit passionnant : Gemini Robotics On-Device. Il s'agit d'un nouveau membre de la famille Gemini, conçu spécifiquement pour les robots et capable de fonctionner localement sur l'appareil, sans dépendre d'une connexion internet continue. Cela signifie que les robots peuvent non seulement s'adapter plus rapidement aux nouvelles tâches et environnements, mais aussi maintenir des performances stables même en l'absence de réseau.

Le Gemini Robotics On-Device repose sur le modèle Gemini2.0 doté de capacités de raisonnement multimodal, offrant une grande flexibilité et une capacité de généralisation des tâches. Il a été soigneusement optimisé pour diverses opérations intelligentes, comme plier des vêtements ou ouvrir les fermetures éclair de sacs, toutes ces opérations étant réalisées directement par le robot.

image.png

Il convient de noter que le Gemini Robotics On-Device est particulièrement adapté aux applications sensibles à la latence, garantissant ainsi un fonctionnement normal même dans des environnements avec une mauvaise connectivité. Pour aider les développeurs à tirer pleinement parti de cette nouvelle technologie, Google lancera également le SDK Gemini Robotics, facilitant l'évaluation des performances du modèle sur des tâches spécifiques. Grâce à ce SDK, les développeurs peuvent tester le modèle dans le simulateur physique MuJoCo de DeepMind et l'adapter rapidement à de nouveaux domaines, grâce à seulement 50 à 100 démonstrations.

En termes de performance, le Gemini Robotics On-Device montre une capacité d'adaptation impressionnante sur plusieurs tâches. Sur sept tâches différentes de difficulté variée, le modèle s'est très bien comporté, pouvant traiter des objets et des scènes inconnus jusqu'alors. Cela démontre non seulement son adaptabilité à différents robots, mais aussi sa généralité.

Cette percée de DeepMind marque un nouvel avancement dans la construction de modèles de robots puissants, représentant une étape importante vers l'ère de l'intelligence incarnée véritable.