Microsoft lance une application dotée d'intelligence artificielle pour les personnes ayant une déficience visuelle

Les personnes souffrant d'un certain type de handicap visuel et possédant un appareil Android pourront enfin disposer d'un assistant virtuel doté d' une intelligence artificielle qui pourra les aider à voir et qui pourra être téléchargé directement depuis la boutique d'applications de Google , Play Store .

L'application créée par Microsoft , Seeing AI, est conçue pour aider les personnes souffrant de cécité partielle ou totale, qui peuvent utiliser l'appareil photo de leur téléphone portable pour identifier du texte, des objets, etc. faciliter la compréhension de l’environnement grâce à l’intelligence artificielle .

L' assistant se chargera de « raconter » à l'utilisateur ce qu'il voit, comme décrire des scènes et même reconnaître les visages des amis et de la famille.

Même si cette plateforme était déjà présente sur les téléphones portables équipés du système d'exploitation iOS , les commentaires et retours reçus de ces premiers utilisateurs ont été utilisés pour améliorer l' application.

De plus, il offre une option pour obtenir plus d'informations avec lesquelles le contenu initial peut être étendu pour donner encore plus de détails sur ce qui est vu autour de l' utilisateur , ce qui peut inclure la distance dans laquelle se trouve un objet. Cela fonctionne non seulement avec l' appareil photo allumé et une analyse en temps réel, mais inclut également la possibilité d'importer des photos et de décrire ce que vous voyez dans chacune d'elles.

Étant donné que les utilisateurs peuvent également avoir des besoins professionnels ou un intérêt pour la lecture, Microsoft a inclus une fonction qui leur permet de répondre à des questions sur les documents qu'ils lisent, comme résumer un texte puis le raconter comme un assistant numérique.

Il suffit à l'utilisateur d'ouvrir l'application sur son appareil et de pointer là où il souhaite voir : cela peut être un paysage, une photographie, des textes, etc. Cela s’applique également à d’autres éléments comme les codes-barres présents sur les produits des centres commerciaux, en plus des mentions inscrites sur le côté de certains produits qui peuvent s’avérer indispensables.

L'intelligence artificielle disponible depuis l' application offre des données importantes comme la reconnaissance de la devise dans laquelle vous exécutez des transactions. D'autre part, cet outil a la possibilité de comprendre plusieurs instructions en même temps tout en pouvant également lire dans d'autres langues que l'anglais .

Dans le cadre de l'intention que la sortie de cette fonctionnalité inclue de nouvelles fonctionnalités, la plateforme est disponible dans des langues telles que le tchèque, le danois, l'anglais, l'allemand, le japonais, le coréen, le grec, le hongrois, le russe, le polonais, le portugais, etc. Bien que ce ne soit qu’une des fonctions auxquelles les patients handicapés peuvent accéder.

Dans un article de blog rédigé par Harry Shum , vice-président exécutif du groupe d'intelligence artificielle et de recherche de Microsoft , il a indiqué que l'utilisation de cette technologie avec l'intelligence artificielle n'est que le début de ce qu'un outil comme celui-ci peut devenir.

L’apprentissage automatique, la perception et le traitement du langage naturel ont évolué au fil du temps vers des domaines de recherche distincts, mais Shum note : « Nous pensons que l’IA sera encore plus utile lorsque nous pourrons créer des outils combinant ces fonctions. »

L'application peut être téléchargée gratuitement sur le Google Play Store , mais pour le moment, elle n'a pas encore été lancée à l'échelle mondiale pour tous les utilisateurs. Actuellement, la seule chose que peuvent faire les utilisateurs qui recherchent une option qui les aide à « voir » est d’attendre que la plateforme soit disponible sur leur territoire.