Google Lens, l’outil de recherche IA pour l’environnement collaboratif de Gemini, a connu une évolution impressionnante en 2024, notamment avec l’introduction de fonctionnalités basées sur l’IA qui permettent d’effectuer des recherches dans des images et des vidéos.
Ces nouvelles fonctionnalités améliorent non seulement la précision des résultats de recherche, mais ouvrent également une gamme de possibilités pour résoudre les problèmes quotidiens et optimiser l’expérience d’achat en ligne.
Ci-dessous, nous expliquons les principales nouvelles fonctionnalités de Google Lens et leur impact sur la façon dont nous interagissons avec la technologie.
Recherches avec vidéo
Jusqu’à récemment, Google Lens autorisait uniquement les recherches basées sur des images statiques, ce qui permettait déjà aux utilisateurs d’identifier plus facilement, entre autres, des objets, des plantes, des animaux et des monuments, simplement avec une photo.
Cependant, il est désormais possible d’effectuer des recherches à l’aide de vidéos, ce qui constitue une avancée significative dans la capacité de l’outil à comprendre le contexte et à fournir des réponses plus détaillées.
Cette nouvelle fonctionnalité, présentée lors de la conférence I/O de Google en mai 2024 et lancée en octobre, permet aux utilisateurs d’enregistrer des vidéos directement depuis l’application et de poser des questions sur ce qui apparaît à l’écran.
Par exemple, si vous enregistrez une vidéo de vos plantes et que vous remarquez qu’elles ne sont pas belles, vous pouvez demander à Google Lens « pourquoi mes plantes sont-elles comme ça ? et l’IA de Google traitera à la fois la vidéo et l’audio pour vous donner une réponse en temps réel.
Multimodalité dans la recherche
La possibilité de rechercher des vidéos est particulièrement utile dans les situations où il peut être difficile de décrire un problème avec de simples mots ou une image fixe.
L’aspect le plus innovant est que Google Lens ne se limite pas seulement à identifier des objets dans les vidéos, mais utilise également le modèle d’intelligence artificielle Gemini de Google.
Gemini pour analyser le contenu et fournir des réponses basées sur un résumé des informations disponibles sur le Web, connu sous le nom d’aperçus de l’IA. Cela facilite une compréhension plus profonde et plus dynamique de ce que vous recherchez.
L’utilisation de la vidéo ajoute une couche multimodale à la recherche, combinant des images animées, du texte et de l’audio.
Cela permet non seulement à Google Lens de fournir des résultats plus complets, mais réduit également le besoin pour les utilisateurs de poser des questions supplémentaires ou de clarifier leurs requêtes.
Par exemple, au lieu d’essayer de décrire une erreur sur le tableau de bord de votre voiture, vous pouvez simplement enregistrer une vidéo et laisser l’IA de Google interpréter le tout pour vous proposer une solution.
Amélioration de l’intégration des achats dans Google Lens
Une autre grande nouveauté pour Google Lens en 2024 est son intégration améliorée avec les plateformes de commerce électronique.
Google a reconnu le potentiel de Lens en tant qu’outil d’identification de produits et, par conséquent, a optimisé ses fonctionnalités pour faciliter les achats en ligne.
Désormais, lorsque Lens identifie un produit dans une image ou une vidéo, il affiche non seulement des informations de base, mais fournit également des détails supplémentaires tels que le prix, les avis des utilisateurs et les offres disponibles dans différents magasins.
Cette fonctionnalité, connue sous le nom de Shopping Graph, a été conçue pour fonctionner dans des catégories clés telles que les vêtements, l’électronique, les jouets et les produits de beauté, permettant aux utilisateurs de comparer les prix et de prendre des décisions d’achat plus éclairées.
Par exemple, si vous voyez un sac à dos qui vous plaît, prenez simplement une photo avec Lens pour recevoir toutes les informations nécessaires, y compris les meilleures offres pour l’acheter en ligne.
De plus, Lens vous permet d’effectuer des recherches spécifiques liées aux produits. Si vous voyez dans un magasin un canapé qui vous plaît, mais que vous en avez besoin dans une autre couleur, prenez simplement une photo et tapez « couleur rouge » dans le champ de recherche.
L’IA de Google trouvera les options disponibles qui correspondent à votre recherche personnalisée.
Voix et texte : combiner des images avec des questions orales
En plus des recherches vidéo et commerciales, Google Lens a amélioré ses capacités de recherche d’images fixes en ajoutant la possibilité de poser des questions orales.
Cette fonctionnalité est disponible en anglais et permet aux utilisateurs d’effectuer des recherches combinant une image et une question orale.
Ceci est particulièrement utile dans les cas où les informations visuelles seules ne suffisent pas et où davantage de contexte doit être fourni.
Ainsi, vous pouvez prendre une photo d’une plante et demander « de quelle quantité d’eau cette plante a-t-elle besoin ? pour obtenir une réponse précise.
Que pouvons-nous attendre du futur ?
Les nouvelles fonctionnalités de Google Lens ne sont que le début de ce que Google a prévu en matière de recherche visuelle et d’intelligence artificielle.
La possibilité de rechercher via vidéo ouvre la porte à de futures applications dans des domaines tels que la réalité augmentée et l’assistance en temps réel.
En fait, d’autres sociétés comme Meta et OpenAI travaillent déjà sur des outils similaires, ce qui suggère que nous sommes au début d’une course au développement de technologies capables de comprendre le monde à travers des images en mouvement.
Avec la capacité de traiter des vidéos et de proposer des réponses grâce à l’intelligence artificielle, l’outil se positionne comme un puissant assistant visuel qui nous aide à résoudre les problèmes quotidiens plus rapidement et plus efficacement.
De plus, son intégration avec le commerce électronique rend plus facile que jamais la recherche et l’achat de produits directement depuis notre mobile.
This post is also available in: