Google a mis à jour son application Lookout, une boîte à outils d’IA pour les personnes malvoyantes, avec deux nouvelles fonctionnalités utiles: la numérisation de longs documents et la lecture d’étiquettes alimentaires. Les formulaires papier et les produits de forme similaire au magasin présentent un défi pour les aveugles et cela devrait faciliter les choses.
Les étiquettes des aliments, si vous y réfléchissez, sont en fait un problème assez difficile à résoudre pour un système de vision par ordinateur. Ils sont conçus pour attirer l’attention et distinctifs, mais pas nécessairement très lisibles ou informatifs. Si une personne voyante peut accidentellement acheter le mauvais type de beurre de cacahuète, quelle chance a une personne qui ne peut pas lire l’étiquette elle-même?
Le nouveau mode d’étiquetage des aliments consiste donc moins à lire du texte qu’à reconnaître exactement quel produit il regarde. Si l’utilisateur doit tourner la canette ou la bouteille pour donner un bon aspect à la caméra, l’application le lui dira. Il compare ce qu’il voit à une base de données d’images de produits et, lorsqu’il obtient une correspondance, il lit les informations pertinentes: marque, produit, saveur, autres informations pertinentes. En cas de problème, l’application peut également scanner le code-barres.
La numérisation de documents n’est pas vraiment excitante, mais il est bon d’avoir l’option intégrée de manière simple dans une application de vision artificielle à usage général. Cela fonctionne comme prévu: pointez votre téléphone sur le document (l’application vous aidera à tout voir) et il le scanne pour que votre lecteur d’écran le lise.
Le mode «lecture rapide» avec lequel l’application a fait ses débuts l’année dernière, qui surveille le texte dans la vue de la caméra et le lit à haute voix, a obtenu quelques améliorations de vitesse.
La mise à jour apporte quelques autres commodités à l’application, qui devrait fonctionner sur n’importe quel téléphone Android avec 2 Go de RAM et exécutant la version 6.0 ou supérieure. Il est également désormais disponible en espagnol, allemand, français et italien.