Ces lunettes intelligentes aident les aveugles, elles ont été inspirées par les chauves-souris et les dauphins

À l’Université de Technologie de Sydney, en Australie, ils ont développé des lunettes intelligentes inspirées de l’ écholocation des chauves-souris et des dauphins, dans le but d’aider les personnes aveugles ou ayant des problèmes de vision.

Malgré les progrès réalisés dans le domaine de l’assistance visuelle, des défis subsistent pour permettre aux personnes malvoyantes de comprendre pleinement et en toute sécurité leur environnement. C'est pourquoi ces lunettes cherchent à résoudre le problème, en profitant de l'une des caractéristiques qui mettent en valeur ces deux animaux au-dessus du reste de la nature.

Selon l' Organisation mondiale de la santé, environ 39 millions de personnes dans le monde sont aveugles et 246 millions vivent avec une basse vision. Il est donc nécessaire de trouver des solutions plus pratiques pour qu'elles puissent s'identifier à leur environnement et, dans ce cas, aux chauves-souris et aux dauphins. aide à apporter une réponse.

À quoi ressemblent les lunettes intelligentes ?

L'écholocation est une compétence que les animaux utilisent pour reconnaître leur environnement en émettant des sons qui rebondissent sur les objets et les surfaces, leur permettant ainsi d'interpréter l'emplacement et la distance des éléments. Les chauves-souris dépendent en grande partie de cette technique pour rechercher des proies et voler dans l’obscurité des grottes.

Des chercheurs de l’Université de technologie de Sydney se sont inspirés de ce principe et ont appliqué l’écholocation à des lunettes intelligentes, créant ainsi ce qu’ils ont appelé le Foveated Audio Device ou FAD. Ces appareils transforment les informations visuelles en représentations sonores uniques, permettant aux personnes malvoyantes d'appréhender leur environnement grâce au son.

Les lunettes FAD sont constituées d'une combinaison de matériel et de logiciels qui fonctionnent ensemble pour offrir une expérience « tactile » aux utilisateurs. Ces lunettes sont constituées de lentilles de réalité augmentée connectées à un téléphone Android, plus précisément un OPPO Find X Pro.

Le moteur de jeu Unity gère l'entrée audio du casque et la sortie de suivi de la caméra/tête, permettant aux FAD de convertir les objets qui entrent dans le champ de vision de l'appareil en… icônes sonores facilement reconnaissables.

Ce qui distingue ces appareils des lunettes intelligentes conventionnelles, c'est qu'ils se concentrent sur le retour auditif plutôt que sur la vision par ordinateur. Au lieu de synthétiser des informations visuelles en parole, ces lunettes créent des représentations sonores uniques pour chaque objet qui entre dans le champ de vision de l'utilisateur. Par exemple, le bruissement des feuilles peut représenter une plante, tandis qu’un bourdonnement peut symboliser un téléphone portable.

Pour évaluer son efficacité, les chercheurs ont effectué des tests auprès de 14 participants, dont sept avaient les yeux bandés et sept étaient aveugles ou avaient des problèmes de basse vision. Ces tests ont été réalisés en plusieurs étapes, comprenant le scan et la sonification d'objets sur une table et la marche dans une pièce avec des objets désordonnés tels qu'un récipient, un livre, une tasse et une bouteille.

Les résultats des tests ont démontré la portée de cette technologie. Les lunettes FAD ont considérablement amélioré la capacité des personnes malvoyantes à reconnaître et à atteindre des objets, même lorsqu'elles traversent une pièce pleine d'obstacles.

Ces dispositifs inspirés de l'écholocation des chauves-souris et des dauphins proposent une nouvelle approche pour aider les personnes malvoyantes à mieux comprendre leur environnement et à se déplacer de manière plus sûre et indépendante. En tirant parti du retour auditif, ces lunettes constituent une méthode portable et efficace d’augmentation sensorielle pour la communauté malvoyante.

« Le retour auditif permet aux utilisateurs d'identifier et d'atteindre des objets avec une précision remarquable. "Nos résultats indiquent que le toucher acoustique a le potentiel d'offrir une méthode portable et efficace d'augmentation sensorielle pour la communauté malvoyante", a déclaré le Dr Howe Zhu, auteur principal de l'étude.