La société a posé cette question au public, avec le hashtag #fihadglass, pour aider à trouver des testeurs pour son programme "explorer". Bien que ces applications soient fermées, un ingénieur local de Wayfair a posté sur Google+ le mois dernier une idée fascinante avec un impact social potentiel : l'utiliser pour permettre physiquement handicapé individus à contrôler leur fauteuils roulants en utilisant seulement leurs yeux.
A écrit Steve McHugh de Wayfair :
#fihadglass J'utiliserais la technologie de suivi oculaire décrite dans le brevet américain 8,235,529 XNUMX XNUMX pour mettre en œuvre le mécanisme alternatif d'un projet de laboratoire de robotique de maîtrise pour les tétraplégiques et autres handicapé personnes à contrôler leur fauteuils roulants électriques (démarrage/arrêt, vitesse, virage) tout en affichant un retour d'information en temps réel sur leur environnement (dangers, obstacles, itinéraires suggérés).
Depuis la première publication de l'idée, McHugh a travaillé avec un concepteur d'interface utilisateur pour l'affiner. Bien que de nombreux détails soient spéculatifs, sous réserve de détails non confirmés sur le fonctionnement de Glass, McHugh a clairement réfléchi à la manière dont cela fonctionnerait. Je lui ai demandé par e-mail de m'expliquer davantage l'origine de l'idée et sa mise en œuvre proposée.
Comment l'idée t'est-elle venue?
L'idée de mon projet est venue d'un cours de robotique que j'ai suivi lors de ma maîtrise en génie mécanique à l'Université Tufts. Pour un projet de classe, l'un des groupes a construit un logiciel de suivi oculaire et un appareil de suivi oculaire. Ils l'ont fait en en utilisant une webcam pour contrôler les moteurs d'une petite voiture robotisée avec l'intention d'appliquer cette technologie à un fauteuil roulant. Plus tard, Tim Roberts, le chef de groupe a pu coupler sa technologie avec un fauteuil roulant dans le cadre de son Senior Capstone.
Lorsque le cofondateur et président de mon entreprise, Wayfair, nous a tous encouragés à soumettre des idées pour le concours Glass Explorer de Google, la première idée qui m'est venue à l'esprit était de savoir comment la technologie intégrée à Google Glass pourrait mener ce projet à life d'une manière complètement différente. J'ai rapidement vérifié si j'avais raison dans mon hypothèse que Google intégrerait le suivi oculaire dans son appareil et j'ai trouvé le brevet américain 8,235,529 XNUMX XNUMX qui a confirmé cette hypothèse. Un eye-tracking développé par des professionnels forfait fourni par Google a éliminé l'un des deux plus grands obstacles que j'ai vus pour que le projet de Tim devienne réalité. Mon projet pourra utiliser une bibliothèque de suivi oculaire hautement optimisée et professionnelle. Le deuxième obstacle majeur à la conception originale est l'obstruction visuelle de l'appareil de suivi oculaire. Google Glass supprime non seulement le besoin d'une obstruction comme dans le concept d'origine, mais il permet également d'ajouter des commentaires à l'utilisateur sur son environnement. Google Glass sera fournir un interface fantastique pour le commandes de fauteuil roulant en fournissant des superpositions d'interface graphique en temps réel sur le dessus du verre.
Pouvez-vous expliquer un peu la technologie de suivi oculaire et comment vous voyez son application dans ce contexte ?
Bien que je n'en sache pas plus sur les spécificités de la technologie de suivi oculaire tant que j'aurai accès à l'API Glass, le brevet délivré par Google (US 8,235,529 XNUMX XNUMX) indique qu'il y aura un suivi assez précis du mouvement de l'œil droit par rapport aux objets présentés dans la ligne de mire de l'utilisateur. Ce niveau de précision fera c'est possible pour utiliser de manière transparente des mouvements oculaires subtils pour sélectionner des commandes qui modifient la vitesse et la direction du fauteuil lorsque l'utilisateur fixe un bouton particulier pendant une période de temps déterminée. Ce qui constitue une période de temps significative devra être déterminé par des tests, mais ce sera plus que le temps qu'une personne pourrait passer par-dessus un bouton et moins qu'un laps de temps qui dégrade le capacité pour passer en toute transparence d'une direction à une autre ou de l'accélération au ralentissement. Les directives de l'interface humaine Google Glass seront très probablement fournir conseils sur le calendrier. Pouvoir compter sur des mouvements oculaires subtils pour un contrôle semblable à un bouton nous permet également de suivre des mouvements oculaires plus extrêmes, ainsi que de fermer l'œil tous ensemble pendant une période de temps significative, pour programmer des dérogations système telles qu'un arrêt d'urgence.
Qu'en est-il de l'image que vous avez de ce à quoi ressemblerait l'interface utilisateur visuelle. Pouvez-vous m'expliquer ce que je regarde et quelles sont les fonctionnalités ?
L'image de l'interface utilisateur jointe à mon application de concours est un concept très approximatif sur la façon dont un utilisateur interagirait avec les commandes. Ce que vous voyez en haut à droite est la carte utilisée pour contrôler la vitesse du fauteuil roulant. Depuis lors, j'ai travaillé avec un concepteur d'interface utilisateur pour approfondir le processus et esquisser à quoi pourrait ressembler l'interface utilisateur. Jusqu'à présent, il est encore au stade conceptuel car il nous manque la bibliothèque Glass GUI qui fera probablement partie du kit de développement. Une fois que cela est relâché, les boutons que vous voyez seront probablement remplacés par des éléments d'interface standard. Les fonctionnalités de base sur l'image ci-dessous sont les boutons en haut qui vous permettent d'augmenter, de diminuer la vitesse du fauteuil roulant ou de l'arrêter complètement. En bas à droite se trouve une barre d'état permettant au cycliste de connaître sa vitesse actuelle et si elle accélère, décélère ou reste constante. En bas à gauche se trouve un indicateur de batterie pour la chaise elle-même et fournit une estimation de la quantité de batterie restante dans le fauteuil. Le dernier élément que j'ai ajouté est la détection d'obstacles et de chemins. La machine serait capable de détecter des obstacles potentiels sur le chemin tels que des nids-de-poule ou des objets sur le chemin et d'alerter l'utilisateur.
Avez-vous autre chose à ajouter?
Je suis vraiment enthousiasmé par ce projet. Mon rêve le plus élevé est que Google me sélectionne d'une manière ou d'une autre parmi des milliers de soumissions et que je puisse finalement en faire un véritable produit d'ici l'année prochaine. Je pense que les applications médicales de Google Glass sont énormes et même à 1500 $, Google Glass serait potentiellement changement de vie pour les tétraplégiques et même les paraplégiques, en libérant leurs mains pour faire d'autres tâches. J'espère vraiment que ce projet deviendra une réalité pour aider tous ceux qui pourraient bénéficier d'interfaces de contrôle supplémentaires améliorer leurs vies.
Article original de Walter Frick de BostInno