TAKTO propose un suivi des mains open source qui s’assemble comme des LEGO. La difficulté commence avec la caméra. Les systèmes de suivi des mains basés sur des caméras, utilisés en réalité virtuelle et augmentée, achoppent lorsque les doigts se chevauchent ou sortent du champ de vision de la caméra. Sebastian Molano vise à résoudre ces problèmes avec le gant open source TAKTO, qu’il a développé dans le cadre de son projet de thèse. Le gant détermine la position des doigts à l’aide de codeurs magnétiques plutôt que d’une caméra, et des actionneurs tirent sur les doigts pour offrir à l’utilisateur un retour supplémentaire. Les détails de fabrication sont publiés sur GitHub. Le site TAKTO.one présente les informations du projet. On y trouve également une console qui visualise l’utilisation et l’état du gant grâce au jumeau numérique en direct de l’appareil, ainsi qu’un guide de montage illustré. Les actionneurs de qualité utilisés font grimper le coût. La version équipée d’actionneurs est donc coûteuse. Une version de détection, qui assure uniquement le suivi des mains, est également disponible. Les travaux que Valve a rendus publics peuvent aussi servir de ressource à ceux qui souhaitent ajouter des fonctionnalités au matériel VR existant.
Pourquoi c’est important
Le fait que le suivi des mains par caméra s’interrompe lorsque les doigts se chevauchent ou sortent du champ de vision est un goulot d’étranglement bien connu des développeurs qui recherchent une interaction fluide en réalité virtuelle et augmentée ; c’est pourquoi une approche indépendante de la caméra intéresse tous ceux qui cherchent une saisie plus fiable. Le caractère open source du projet et la publication du guide de montage ainsi que de la console de jumeau numérique en direct réduisent l’obstacle pour les makers et les chercheurs qui souhaitent fabriquer et modifier leur propre matériel sans attendre un produit commercial. Le fait que des actionneurs de qualité fournissant un retour haptique fassent grimper le coût rend visible la tension entre réalisme et accessibilité dans ce type de matériel ; la version de détection, qui assure uniquement le suivi des mains, constitue une réponse pratique à cette tension. La question reste ouverte de savoir si ce travail, encore au stade de projet de thèse, sera adopté par la communauté et deviendra un outil durable. Le fait que les travaux rendus publics par Valve puissent servir de ressource à ceux qui souhaitent ajouter des fonctionnalités au matériel VR existant rend également cette avancée pertinente pour les utilisateurs qui ne veulent pas fabriquer leur propre appareil.
Terme : open source
L’open source signifie que le code source d’un logiciel est accessible à tous et que sa licence autorise l’examen, la modification et la redistribution ; ce n’est pas synonyme de gratuité.