Google Lens propose désormais une fonctionnalité qui semble très prometteuse en couplant une recherche visuelle (sur une image) à du texte fourni de façon complémentaire. Une possibilité hélas (et encore une fois) uniquement disponible outre-Atlantique...

Google vient d'annoncer une nouvelle fonctionnalité sur son moteur avec la recherche multiple (multisearch in english). L'idée est d'effectuer des recherches en utilisant à la fois du texte et des images. Et pour cela, c'est Google Lens qui est utilisé sur mobile (mais encore seulement aux États-unis et sur les recherche en anglais).

Pour commencer, il faut ouvrir l'application Google sur Android ou iOS, appuyer sur l'icône de l'appareil photo « Lens » et rechercher une capture d'écran ou prendre une photo d'un objet. Ensuite, il faut balayer vers le haut et appuyer sur le bouton "+ Ajouter à votre recherche" pour ajouter du texte à l'image sélectionnée.

La recherche se fait alors en simultané avec les deux types d'informations en entrée : l'image choisie plus le texte complémentaire fourni.

Google fournit quelques exemples de types de recherches qu'il est possible de faire ainsi :

  • Faire une capture d'écran d'une robe orange élégante et ajouter la requête "vert" pour la trouver dans une autre couleur.
  • Prendre une photo de votre salle à manger et ajouter la requête "table basse" pour trouver une table assortie.
  • Prendre une photo de votre plante de romarin et ajouter la requête "instructions d'entretien".
  • Etc.

Voici un exemple de la façon dont le système fonctionne au travers de cette vidéo :

Exemple d'utilisation de recherche multiple sur Google Lens. Source : Google

Google indique dans son article que si cette fonctionnalité n'utilise pas son algorithme MUM à l'heure actuelle, cette implication est à l'étude pour voir si elle peut apporter un « plus » notable à l'outil.

Bien sûr, tout cela ne sera possible que quand ce système sera disponible en France… À ce jour, aucune date n'a été indiquée pour cela...