TAKTO предлагает отслеживание рук с открытым исходным кодом, которое собирается, как LEGO. Сложность начинается с камеры. Системы отслеживания рук на основе камер, используемые в виртуальной и дополненной реальности, дают сбой, когда пальцы перекрывают друг друга или выходят из поля зрения камеры. Sebastian Molano в рамках дипломного проекта разработал перчатку TAKTO с открытым исходным кодом и намерен с её помощью устранить эти проблемы. Перчатка определяет положение пальцев с помощью магнитных энкодеров вместо камеры, а актуаторы тянут пальцы, давая пользователю дополнительную обратную связь. Детали сборки публикуются на GitHub. Сайт TAKTO.one предоставляет информацию о проекте. Кроме того, здесь представлены консоль, визуализирующая использование и состояние перчатки с помощью живого цифрового двойника устройства, а также наглядное руководство по сборке. Используемые качественные актуаторы увеличивают стоимость. Поэтому версия с актуаторами дорогая. Также доступна сенсорная версия, которая только отслеживает руки. Работы, обнародованные Valve, также могут стать ресурсом для тех, кто хочет добавить функциональность существующему VR-оборудованию.
Почему это важно
Сбои отслеживания рук на основе камеры, когда пальцы накладываются друг на друга или выходят из поля зрения, — известное узкое место для разработчиков, стремящихся к бесшовному взаимодействию в виртуальной и дополненной реальности; поэтому подход, не зависящий от камеры, затрагивает всех, кто ищет более надёжный ввод. То, что проект имеет открытый исходный код, а руководство по сборке и консоль с живым цифровым двойником опубликованы, снижает барьер для мейкеров и исследователей, которые хотят создавать и модифицировать собственное оборудование, не дожидаясь коммерческого продукта. То, что качественные актуаторы, обеспечивающие тактильную обратную связь, увеличивают стоимость, делает заметным противоречие между реалистичностью и доступностью в таком оборудовании; сенсорная версия, которая только отслеживает руки, — практический ответ на это противоречие. Остаётся открытым вопрос, будет ли работа, пока находящаяся на стадии дипломного проекта, принята сообществом и превратится ли в устойчивый инструмент. То, что работы, обнародованные Valve, могут стать ресурсом для тех, кто хочет добавить функциональность существующему VR-оборудованию, делает эту разработку актуальной и для пользователей, не желающих создавать собственное устройство.
Термин: открытый исходный код
Открытый исходный код означает, что исходный код программного обеспечения доступен всем, а его лицензия разрешает изучение, изменение и повторное распространение; это не то же самое, что бесплатность.