Dans perlmOl 017, nous en sommes venus à dire que Microsoft Research est l’un des départements les plus incroyables de la société dirigée par Satya Nadella. En voici une autre preuve : ce vendredi (17), la division a donné plus de détails sur une technologie présentée l’année dernière qui permet de détecter avec une extrême précision tous les mouvements de la main, le Handpose.
En utilisant une seule caméra de profondeur, l’invention fonctionne d’une manière qui ressemble au Kinect. Mais le secret réside dans le logiciel de l’équipement.
Des projets similaires ont été développés depuis un certain temps, y compris par Microsoft lui-même. Grâce à cette recherche, la société a réalisé que la principale difficulté des systèmes qui détectent les mouvements de la main est la limitation du suivi – nous sommes capables de faire des gestes si complexes avec nos doigts que beaucoup d’entre eux passent inaperçus dans le suivi. De plus, certains mouvements peuvent finir par cacher un ou plusieurs doigts à la caméra.
C’est là qu’intervient Handpose. Les chercheurs de Microsoft Research ont inséré dans le système la modélisation tridimensionnelle d’une main qui inclut toutes les possibilités de mouvements et d’articulations. Associé à un système d’apprentissage, Handpose peut alors anticiper les gestes possibles et ainsi “compléter” les mouvements non détectés.
Le résultat est ce niveau de précision que nous voyons dans la vidéo :
Il existe plusieurs applications possibles pour cette idée. Handpose peut être utilisé pour contrôler des jeux (si vous faites l’idiot, la technologie apparaîtra dans une nouvelle version de Kinect), interpréter le langage des signes, manipuler des objets qui sont modélisés dans un logiciel spécifique ou “piloter” un drone à distance, par exemple.
Mais les chercheurs de Microsoft Research vont plus loin : à long terme, une telle technologie pourrait même aider un ordinateur à comprendre notre langage corporel pour reconnaître des ordres ou même exécuter une tâche automatiquement en fonction de notre humeur. Avez-vous réfléchi ?
