Êtes-vous déjà allé changer de chaîne, puis vous vous êtes rendu compte que votre télécommande était tombée derrière le canapé? Ou vous vouliez faire défiler une recette sur votre tablette, mais vos mains étaient couvertes de pâte?
Eh bien, vous avez peut-être de la chance. Des chercheurs de l'université de Lancaster en Angleterre ont développé une technologie de reconnaissance des gestes qui permet de transformer pratiquement n'importe quoi - votre main, une spatule, un tournevis - en télécommande. La technologie, que les chercheurs appellent «Matchpoint», fonctionne via une webcam, utilisant la vision par ordinateur pour suivre une partie du corps ou un objet lors de son interaction avec un petit widget situé dans le coin de l'écran. Le widget est entouré de cibles correspondant à différentes fonctions (contrôle du volume, défilement, changement de chaîne, etc.). L’utilisateur manipule les cibles en activant des curseurs qui se déplacent de haut en bas avec le mouvement de l’utilisateur pour contrôler des fonctions telles que le volume.
Les technologies de contrôle gestuel existantes ne fonctionnent généralement qu'avec des objets ou des parties du corps déjà reconnus par le système, tels qu'un contrôleur dédié ou une main humaine. Et ils peuvent se demander si l'utilisateur est proche de l'écran ou s'ils sont complètement visibles par la caméra, car le système doit pouvoir identifier clairement l'objet en question. La technologie de Matchpoint est différente dans le sens où elle ne recherche pas un objet spécifique, mais un mouvement rotatif. Les créateurs de Matchpoint espèrent que cela facilitera l'expérience utilisateur.
«Le système est particulièrement utile lorsque l'utilisateur est engagé dans d'autres activités et peut ne pas être dans la position la plus conventionnelle pour effectuer un geste», explique Christopher Clarke, l'un des créateurs de Matchpoint. «Comme le système ne repose pas sur la détection d’êtres humains ou d’objets en soi, il fonctionne toujours quelle que soit la position ou la posture de l’utilisateur, ou les objets qu’ils pourraient éventuellement tenir - se cachant sous une belle couverture confortable avec une tasse de thé.»
Cette image montre des cibles dans le coin d'un écran de télévision. (Université de Lancaster) Matchpoint permet également à plusieurs mains ou objets d'interagir avec les tableaux blancs numériques, les zooms et les images en rotation, ce qui peut être utile pour les présentations de groupe. De plus, les utilisateurs peuvent lier de manière permanente des objets spécifiques aux contrôles, ce qui signifie qu'ils conservent leur fonction de contrôle sans avoir besoin d'initialisation. Ainsi, un utilisateur pourrait, par exemple, associer un train de jouets à la fonction de contrôle du volume de sa tablette. Chaque fois qu'ils avancent le jouet, le volume augmente.
Il est facile de voir comment Matchpoint pourrait être utile dans la maison, permettant aux utilisateurs, par exemple, de mettre en pause une vidéo explicative de réparation de voiture sans quitter le moteur, ou de changer de chaîne avec un biberon sans réveiller un nouveau-né endormi . Mais ses créateurs espèrent que ses utilisations iront au-delà du divertissement.
«Les applications les plus intéressantes sont les applications« stériles », telles que la chirurgie ou le travail en cuisine, où il est souhaitable de disposer d’un système permettant aux utilisateurs d’utiliser tout type d’objet, sans toucher ni à toucher aux objets ni à la contamination croisée. objets », dit Clarke.
Le système pourrait aussi potentiellement être utile aux personnes handicapées, les rendant ainsi difficiles à utiliser avec les outils d'interface traditionnels tels qu'une souris distante ou une souris d'ordinateur.
Clarke et son co-créateur, Hans Gellersen, présenteront un article sur Matchpoint ce mois-ci au symposium ACM sur le logiciel et la technologie d'interface utilisateur 2017 à Québec, une conférence sur les technologies d'interface homme-machine. À l’avenir, ils espèrent faire passer Matchpoint au-delà de la phase de prototype et explorer les possibilités de commercialisation.
Les technologies de contrôle gestuel sont devenues de plus en plus courantes ces dernières années, mais les développeurs sont toujours en train de résoudre les problèmes. La plupart des systèmes ont du mal à reconnaître les gestes dans des conditions de faible luminosité ou lorsque l'utilisateur est trop éloigné. De plus, ils ne travaillent généralement pas à l'extérieur, car ils utilisent des capteurs infrarouges pour évaluer la distance. la lumière naturelle du soleil masque les rayons infrarouges. Ils ont besoin de caméras, ce qui signifie qu'ils ne fonctionneront pas avec les téléviseurs plus anciens. Et certains utilisateurs se sentent simplement stupides ou inconfortables en agitant leurs mains.
Matchpoint représente un changement «incrémental» plutôt que «transformationnel» dans le développement de meilleurs systèmes de reconnaissance des gestes, déclare Juan P. Wachs, professeur à la faculté de génie industriel de l'Université de Purdue, qui étudie les interfaces homme-machine.
"Le grand saut aura lieu lorsque l'ordinateur ou l'appareil ne vous dira pas quel mouvement vous devez faire pour contrôler quelque chose, mais vous agissez naturellement et la technologie peut" déduire "de ce que vous voulez faire", dit-il. "Peut-être aussi utiliser des signaux cérébraux, en tant que solution intégrée."
Mais si Matchpoint arrive sur le marché, au moins, les télécommandes perdues pourraient bientôt appartenir au passé et nous allons tous changer de chaîne avec la vague d'une banane.
