Gadgets

HoloLens actes que les yeux pour les aveugles et guides d’entre eux avec des messages audio

Microsoft HoloLens dispose d’une impressionnante capacité de faire rapidement le sens de ses environs, mais se limiter à l’affichage des e-mails ou des personnages sur eux montrent un manque de créativité. La nouvelle recherche montre que cela fonctionne très bien comme une prothèse visuelle pour les malvoyants, pas de relais réelle visuelle des données, mais de les guider en temps réel avec des signaux audio et des instructions.

Les chercheurs de Caltech et de l’Université de Californie du Sud, d’abord valoir que le rétablissement de la vision est à l’heure actuelle tout simplement pas un objectif réaliste, mais que le remplacement de la perception partie de la vision n’est pas nécessaire de reproduire la partie pratique. Après tout, si on peut dire d’où un président est, vous n’avez pas besoin de le voir pour l’éviter, non?

Croquer des données visuelles et création d’une carte de haut niveau de fonctionnalités comme les murs, les obstacles et les portes est l’une des fonctions essentielles de la HoloLens, l’équipe a donc décidé de le laisser faire sa chose et de recréer l’environnement de l’utilisateur à partir de ces extraits de fonctionnalités.

Ils ont conçu le système autour de son, naturellement. Tous les grands de l’objet et de la fonction peut indiquer à l’utilisateur où il se trouve, soit par la voix ou le son. Murs, par exemple, de siffler (sans doute un bruit blanc, pas un sifflement de serpent) que l’utilisateur s’approche d’eux. Et l’utilisateur peut scanner la scène, avec des objets annonçant eux-mêmes de gauche à droite à partir de la direction dans laquelle ils sont situés. Un seul objet peut être sélectionné et répéter sa légende pour aider l’utilisateur à trouver.

C’est bien stationnaire pour des tâches comme la recherche de votre canne ou le canapé dans la maison d’un ami. Mais le système fonctionne aussi en mouvement.

L’équipe a recruté sept personnes aveugles à la tester. Ils ont eu une brève intro mais pas de la formation, et a ensuite demandé d’accomplir une variété de tâches. Les utilisateurs peuvent localiser de manière fiable et pointer des objets à partir des signaux audio, et ont été en mesure de trouver une chaise dans une chambre dans une fraction du temps qu’ils auraient normalement, et d’éviter les obstacles facilement.

Ce rendu indique le nombre de chemins empruntés par les utilisateurs dans les tests de navigation

Ensuite, ils ont été chargés de navigation à partir de l’entrée d’un bâtiment dans une chambre au deuxième étage en suivant le casque. Un “guide virtuel” dit à maintes reprises: “suivez-moi” à partir d’une distance apparente de quelques pieds à l’avance, tout d’avertissement lorsque les escaliers ont été à venir, où des mains courantes ont été et quand l’utilisateur a disparu.

Tous les sept, les utilisateurs sont arrivés à leurs destinations sur le premier essai, et beaucoup plus rapidement que s’ils avaient dû procéder normalement aucune navigation. Un sujet, les notes de papier, a déclaré: “C’était amusant! Quand puis-je l’obtenir?”

Microsoft fait l’air en quelque chose comme il y a des années, mais le matériel n’était tout simplement pas là — HoloLens changements. Même si il est clairement destiné à une utilisation par des personnes voyantes, ses capacités naturellement remplir les exigences pour une prothèse visuelle comme celui décrit ici.

Fait intéressant, les chercheurs soulignent que ce type de système a également été prédit plus de 30 ans, bien avant même qu’ils aient été proches possibles:

“Je crois fermement que nous devrions prendre une approche plus sophistiquée, en utilisant la puissance de l’intelligence artificielle pour le traitement de grandes quantités d’détaillées de l’information visuelle dans le but de remplacer les fonctions manquantes de l’œil et beaucoup de visuels pré-traitement effectué par le cerveau,” a écrit le clairement clairvoyant C. C. Collins chemin du retour en 1985.

Le potentiel pour un système de ce type est énorme, mais c’est juste un prototype. Comme les systèmes comme HoloLens obtenir plus léger et plus puissant, ils accédez à partir d’un laboratoire lié bizarreries d’articles de tous les jours — on peut penser à la réception d’un hôtel ou centre commercial de stockage en quelques-uns pour donner aux malvoyants gens qui ont besoin de trouver leur chambre ou tel magasin.

“Par ce point, nous nous attendons à ce que le lecteur a déjà des propositions à l’esprit pour l’amélioration de la prothèse cognitive,” ils écrivent. “Un matériel/logiciel de plate-forme est maintenant disponible pour rapidement mettre en œuvre ces idées et de les tester avec des sujets humains. Nous espérons que cela va inspirer des développements pour améliorer la perception pour les aveugles et les malvoyants, en utilisant augmentée auditif réalité de communiquer des choses que nous ne voyons pas.”

About the author

Cyriac

Je suis Zeh Cyriac , fondateur et chef de la direction de la société informatique DROP Corporation Inc. et blogueur indépendant aux États-Unis, avec une passion pour l'Entrepreneuriat en ligne, le marketing de contenu et toutes les choses qui tournent au tour du digital et ’informatique .

Add Comment

Click here to post a comment

Newsletter

Les dernières nouvelles du Web, de la high-tech et de l'innovation numérique tous les matins à l'heure du petit déjeuner.

Vous avez parfaitement souscrit ! Consultez vos mails pour confirmer l'inscription .