Google ajoute des capacités multimodales à la mode d'IA grâce à la recherche à lens

Illustration de recherche visuelle sur Google Lens. (photo: hexagones. Google)

ARTA - Google a lancé une capacité multimodale dans la fonctionnalité mode AI intégrée à la recherche visuelle de Google Lens. Cette fonctionnalité permet aux utilisateurs de prendre ou de télécharger des images, de poser des questions liées à l’image et de recevoir des réponses en contexte riche avec des liens pertinents pour une exploration plus approfondie. De plus, mode AI est désormais disponible pour des millions d’utilisateurs de Google Labs gratuits aux États-Unis.

Google a lancé une fonctionnalité expérimentale de mode AI dédiée aux clients de Google One AI Premium. Maintenant, le géant du moteur de recherche a étendu l’accès à des millions d’utilisateurs de Google Labs aux États-Unis.

Google améliore également les capacités de mode d’IA en ajoutant une fonctionnalité multimodale, ce qui signifie que les utilisateurs peuvent désormais télécharger des images ou prendre des photos, puis directement demander le contenu de l’image et recevoir une explication approfondie des résultats de recherche Google.

Google dit que cette fonctionnalité de recherche multimodale est alimentée par Google Lens et une version spéciale du modèle AI Gemini. Maintenant, le système peut comprendre tous les contexts d’une image, y compris la relation entre les objets, les matériaux, les couleurs, les formes et les arrangements à l’intérieur de l’image.

Avec l’expertise de Google dans les recherches visuelles, Lens est en mesure d’identifier avec précision chaque objet de la photo. La technologie utilise une approche appelée question fan-out, où l’IA effectue une variété de recherches supplémentaires pour fournir des points de vue plus approfondi.

ina est plus que de simples recherches visuelles

partagé par Google, par exemple, montre qu’IA mode peut reconnaître tous les livres dans les photos des rayons du livre, puis rechercher des informations sur ces titres et suggérer des livres similaires qui reçoivent des critiques élevées. Les résultats ne sont pas seulement une liste de livres, mais aussi un lien pour les acheter et plus de détails.

rons vous en voudront aussi poser des questions supplémentaires, telles que: "Je veux un livre lisible rapidement. Quelles sont ces recommandations les plus courtes?".

rénal. Cette fonctionnalité est considérée comme une réponse de Google aux services de recherche basés sur l’IA tels que Perplexity et ChatGPT Search, qui fournissent des réponses résumées des indices de recherche. Google prévoit de continuer à améliorer cette expérience de recherche et d’élargir les fonctionnalités de mode d’IA dans les prochains mois.