VR Magic Gestures AI

В этой бесплатной демо-версии вы можете протестировать Искусственный интеллект VR Magic Gestures, который представляет собой пакет Unity для обнаружения и распознавания 3D-жестов. Для демонстрации требуется HTC Vive или совместимое оборудование. В демоверсии вы можете:

• рисовать фигуры волшебной палочкой, чтобы произносить заклинания,
• вызывать волшебные воздушные шары из пустоты,
• создавать свои собственные заклинания!

В комплект входят:

1. Нейронная сеть (MLP), обученная методом обратного распространения ошибки,
2. Примеры физических заклинаний,
3. Анимированная система пользовательского интерфейса, созданная для полного погружения.

Загрузить исходный код

Известные проблемы:

• если вы зададите одну и ту же форму для двух разных заклинаний, нейронная сеть не сможет распознать разницу,
• в демоверсии средство изучения жестов настроено для небольшого обучающего набора, что ускоряет обучение и тестирование, но эта настройка недостаточна для 100% точности,
• если у вас возникли проблемы с имитацией предопределенного заклинания, нажмите на его всплывающее окно и переопределите жест, чтобы он соответствовал вашему профилю,
• след в пузыре — это всего лишь приблизительный предварительный просмотр жеста, основанный на количестве повторений, а не точная форма, которую вы должны имитировать :)