La recherche Google Lens avec vidéo et voix est la fonctionnalité d'IA la plus intéressante à ce jour
Google a ajouté une suite de nouvelles fonctionnalités basées sur l'IA générative à son moteur de recherche de plus en plus intelligent.
Dans un article de blog publié aujourd'hui, Google a dévoilé la possibilité de rechercher des vidéos que vous avez capturées sur votre téléphone au sein de la fonctionnalité Google Lens, tout en posant simultanément des questions sur ce que vous enregistrez.
À partir de là, Google traitera ce que vous avez demandé dans le contexte de ce qui est à l'écran et produira un aperçu de l'IA, ainsi que des liens Web utiles. il est disponible aujourd'hui dans l'application Google pour iOS et Android, mais vous devrez vous inscrire à l'expérience « Aperçus de l'IA et plus » dans Labs pour l'essayer.
Google explique : « Supposons que vous soyez à l'aquarium et que vous souhaitiez en savoir plus sur certains poissons intéressants lors de l'une des expositions. Ouvrez Lens dans l'application Google et maintenez le déclencheur enfoncé pour enregistrer tout en posant votre question à voix haute, par exemple « pourquoi nagent-ils ensemble ? » Nos systèmes donneront un sens à la vidéo et à votre question ensemble pour produire un aperçu de l'IA, ainsi que des ressources utiles provenant du Web.
En plus de la vidéo, Google ajoute la possibilité de poser des questions vocales lorsque vous prenez une photo dans Lens. Google affirme que les utilisateurs pourront pointer l'appareil photo, maintenir le déclencheur et poser une question tout en le faisant. Cette fonctionnalité est entièrement disponible dans les applications mobiles Google.
Il existe également une mise à jour qui améliorera la page de résultats lorsque vous utilisez la recherche d'images pour faire correspondre les articles que vous voyez dans la nature avec les options d'achat. Lens peut désormais identifier des produits exacts, plutôt que simplement quelque chose qui ressemble à l'image que vous capturez.
Circle to Search – l'une des fonctionnalités les plus intéressantes de l'IA – bénéficie d'une autre mise à niveau qui identifiera toute musique diffusée dans le contenu de votre écran. Ainsi, s'il y a une chanson dans un tweet que vous essayez de discerner, par exemple, Google nommera cette chanson.
Enfin, pour les utilisateurs américains, Google déploie de nouveaux outils pour organiser les pages de résultats de recherche avec l'IA.
« Cette semaine, nous déployons des pages de résultats de recherche organisées avec l'IA aux États-Unis, en commençant par des recettes et des idées de repas sur mobile. Vous verrez désormais une expérience pleine page, avec des résultats pertinents organisés juste pour vous. Vous pouvez facilement explorer le contenu et les perspectives du Web, notamment des articles, des vidéos, des forums et bien plus encore, le tout en un seul endroit », écrit Google dans le billet de blog.