Gemini, le chatbot de Google, veut être partout. Celui-ci a déjà remplacé Google Assistant sur les smartphones et, petit à petit, il arrive aussi sur les véhicules équipés de la plateforme de Google. Sur ces véhicules, les conducteurs peuvent interagir de manière plus naturelle, demander des tâches plus complexes ou poser des questions plus difficiles. Mais la version de Gemini sur les véhicules va encore évoluer. Et, en particulier, Google prépare une nouvelle fonctionnalité qui permettra à son IA d’utiliser la caméra embarquée d’une voiture pour voir ce qui se trouve devant celle-ci, et répondre aux questions.
Cette nouveauté a été présentée dans une vidéo de Google, dans laquelle Sameer Samat, le président d’Android, fait une démonstration dans une Volvo EX60 qui utilise la plateforme de Google. Sur ce véhicule, Gemini se connecte à la caméra frontale de la voiture et est donc capable d’analyser le flux vidéo. Et grâce à cette connexion, l’IA peut répondre aux questions du conducteur sur un objet qui se trouve dans le champ de vision de la caméra.
Dans sa démonstration, Sameer Samat demande, par exemple, des informations sur une sculpture qui se trouve dans son itinéraire, et des informations sur le bâtiment qui se trouve derrière cette sculpture.
L’IA multimodale devient la norme
Pour le moment, on ne sait pas quand cette fonctionnalité sera lancée et on ne connaît pas la liste des véhicules qui seront compatibles. Dans la vidéo, Sameer Samat explique que Google travaille encore sur cette technologie et que l’entreprise réfléchit encore au meilleur moyen de la lancer sur les véhicules.
Mais, en tout cas, il s’agit d’une fonctionnalité qui existe déjà sur les smartphones. Sur Android, on a déjà la possibilité d’utiliser Gemini Live avec la caméra pour poser des questions sur les objets qui nous entourent. En effet, l’IA de Google est déjà multimodale (elle accepte plusieurs types de format en même temps). Et ce type d’interaction devrait aussi être au cœur de l’expérience que Google va proposer sur les lunettes connectées sous Android XR.
🟣 Pour ne manquer aucune news sur le Journal du Geek, suivez-nous sur Google et sur notre canal WhatsApp. Et si vous nous adorez, on a une newsletter tous les matins.