Google Lens : comment fonctionne la reconnaissance d’objets ?

 

Google Lens est l’une des grosses annonces du Google Ask More, l’événement de présentation de nombreux nouveaux produits que Google tenait le mercredi 4 octobre 2017. Le dispositif avait déjà été présenté lors du Google I/O 2017, mais la firme de Mountain View a annoncé qu’il serait disponible sur Google Assistant. Voici comment marche cette nouvelle fonctionnalité qui reconnaît les objets. 

google lens

Google Lens est un nouveau système de reconnaissance d’objets de la firme, et qui doit désormais être intégré à Google Photos mais aussi à Google Assistant. Le but ? C’est un peu le même que Shazam, mais version objets. Avec en plus des actions qui apparaissent en fonction du contexte. Le système repose sur l’intelligence artificielle pour reconnaître dynamiquement des objets qui nous entourent. Un véritable challenge technologique : Google a annoncé de nombreux progrès de la technologie permettant un taux de réussite de 43% même dans les situations complexes.

Il est donc possible que le système ait quelques ratés au début mais les premières démos sont impressionnantes. Il doit néanmoins s’améliorer avec le temps via le machine learning, au fur et à mesure que des millions d’utilisateurs pourront l’utiliser. Google a fait l’analogie avec le moteur de recherche dont l’algorithme se base aujourd’hui sur des trillions de références possibles. Et a permis à Google de creuser avec les années un large fossé avec la concurrence. Google arrive aux prémisses d’une technologie où peu se sont encore aventurés. On peut citer le Bixby Vision de Samsung, ou dans une moindre mesure l’ARKit dans l’écosystème Apple.

Google Lens, comment ça fonctionne ?

Google Lens est une fonctionnalité de plusieurs applications Google, dont, désormais Google Assistant. Il vous suffit de pointer la caméra du smartphone vers une plante, un magasin, un livre… Un carré s’affiche autour des items identifiés par le système. Non seulement ces derniers sont identifiés, mais des suggestions contextuelles apparaissent, par exemple si vous prenez une fleur en photo, vous aurez les adresses des fleuristes autour de vous.

Autre exemple : pour les restaurants, vous saurez immédiatement quels sont les avis des internautes, ou les horaires d’ouverture entre autres exemples.

Comment utiliser Google Lens ?

Utiliser Google Lens est très simple. Dès que la fonctionnalité sera poussée sur votre smartphone, une nouvelle icône apparaitra dans Google Photos et Google Assistant. Il suffit d’appuyer dessus pour commencer à identifier des objets. Petit bonus : vous pouvez l’utiliser pour reconnaître des informations écrites sur des captures d’écran, comme les numéros de téléphone.

Ou par exemple le code WiFi inscrit sur une étiquette derrière votre box internet. Appuyez sur l’icône, pointez, capturez, appuyez sur l’action, et vous avez gagné un temps précieux !

Quand est-ce que Google Lens arrive sur votre smartphone ?

Google a décidé de réserver un « preview » de Lens aux Pixel 2 dans un premier temps. Mais Google devrait pousser la fonctionnalité sur tous les smartphones équipés d’Assistant et de Google Photos « prochainement ». Un peu de patience, ça arrive !

En attendant on vous propose de regarder les vidéos qui montrent les capacités impressionnantes du système :

https://youtu.be/7fngCEEdH-8



Abonnez-vous gratuitement à la newsletter
Chaque jour, le meilleur de Phonandroid dans votre boite mail !
Réagissez à cet article !
Demandez nos dernières applications !
google messages 42 mise jour apk
Android Messages va chiffrer vos SMS de bout en bout comme Telegram

Google travaille actuellement sur le chiffrement des messages pour les utilisateurs d’Android. La firme américaine veut protéger les conversations privées, mais également utiliser une nouvelle norme, passant du SMS au RCS, plus flexible. La question de la protection de la…

google photos
Google Photos annonce la fin du stockage gratuit et illimité dès 2021

Google Photos va mettre un terme au stockage gratuit et illimité de photos. Dès le 1er juin 2021, les nouvelles photos des utilisateurs seront décomptées de l’espace de stockage de 15 Go alloué à Google Drive, Gmail et Photos. Pour les utilisateurs ayant…

Capture
Google Street View : vous pourrez bientôt ajouter vos propres panoramas

Google Street View pourrait prochainement s’enrichir d’une nouvelle fonctionnalité intéressante appelée driving mode. Elle pourrait permettre aux utilisateurs d’ajouter eux-mêmes des panoramas sur l’application en cas de manque. Google Street View a changé la manière dont nous nous repérons dans…

google messages programmation sms
Google Messages proposera bientôt de programmer l’envoi d’un texto

Google Messages proposera bientôt de programmer l’envoi d’un texto à une date et une heure fixée en amont. C’est en tout cas ce qu’affirment nos confrères du site XDA Developers.  Google continue d’améliorer ses différents services et applications. En attendant…