Специализированные vr-контроллеры dextera для более глубокого погружения в обучающих симуляторах
Проект направлен на разработку и внедрение узкоспециализированных VR-контроллеров с тактильной и силовой обратной связью для профессионального обучения в образовательных организациях медицинского профиля. В перспективе проект может быть адаптирован в отрасли: промышленные симуляторы (создание микроконтроллеров и прочей микроэлектроники)
В отличие от стандартных предложенных решений, устройство обеспечивает высокую точность захвата за счет внедрения DOC-станции, позволяющей более точно отслеживать позицию контроллера в пространстве относительно его самого. Отдельная станция позволит ощутить реалистичное взаимодействие с виртуальными объектами и эргономику для длительного использования. Погружение усиливается за счёт интеграции с внешними устройствами, такими как поверхности с датчиками давления. Реализация проекта позволит повысить эффективность подготовки специалистов медицинской сферы, сократить количество ошибок в реальной практике и ускорить адаптацию обучающихся. Ожидаемым результатом является создание работающего прототипа, совместимого с популярными VR-платформами, и проведение пилотного тестирования в профильных медицинских образовательных учреждениях
Целевая аудитория. B2B - медицинские образовательные организации. Производства, которые производят оборудование и инструменты для образовательных медицинских организаций
Ценностное предложение.
VR-контроллер с базовой станцией и набором инструментов для нее. Набор инструментов является адаптивным для применения в медицинской сфере и снабжен инфракрасными датчиками и IMU-сенсорами, позволяющими снизить время отклика с инструмента вплоть до 0,02 сек.
Док-станция отслеживает не только общее положение оператора, но и отдельно анализирует движение его рук с помощью инфракрасных камер. Система определяет положение каждого инструмента и измеряет три ключевых параметра: силу нажатия, устойчивость хвата и плавность движений. Все данные передаются в программу симулятора, которая показывает ошибки и выставляет оценку в реальном времени. Технология использует только базовые сенсоры и простые алгоритмы анализа, что делает систему доступной для массового использования в медицинских училищах и больницах.
Научно-техническое решение. Для борьбы с неизбежным "уплыванием" позиции контроллера, характерным для всех автономных VR-систем, мы применяем гибридный подход. Помимо встроенных датчиков движения, используется компактная док-станция внешней коррекции. Эта станция выполняет роль "опорного маяка". В процессе работы, как только пользователь на доли секунды подносит контроллер в зону ее видимости, система проводит сверку точных координат и мгновенно корректирует накопившуюся погрешность. Таким образом, нам удается совместить свободу беспроводного контроллера со стабильной и предсказуемой точностью, которая раньше была доступна только в сложных системах с внешними датчиками. Это особенно важно для задач, где цена ошибки измеряется не в пикселях, а в миллиметрах — например, при отработке хирургических процедур
