VR'de 2D jest tanıma için en iyi yaklaşım?

Question

HTC Vive roomscale VR kulaklığıyla jest tanımayı kullanan bir oyun geliştiriciyim ve jest tanıma doğruluğumuzu geliştirmeye çalışıyorum.

(bağlam için oyun,:. http://store.steampowered.com//app/488760 Bu havada semboller çizerek büyü bir oyun.)

Şu anda 2D jest tanıma için 1 dolar algoritması kullanarak ve bir ortografik kullanıyorum Kamera oyuncunun uzayda çizdiği hareketi düzleştirmek için oyuncunun yatay rotasyonuna bağlı. Bununla birlikte, problem için daha iyi yaklaşımlar olması gerektiğine eminim!

Ben talimatlarda 2D hareketlerini temsil etmek var, bu yüzden ideal olarak İsterdim:

jest düzleştirmek için en uygun vektör bulun. 2D uzaya düzleştirin. Hangi jest olduğunu anlamak için en iyi jest tanıma algoritmasını kullanın.

Her koşulda% 100'e yakın hassasiyet elde etmek gerçekten çok iyi olur. Şu anda, örneğin, oyuncular savaş sıcağında bir çember çizmeye çalıştıklarında kafa karıştırmaya eğilimlidir ve bunun yerine bir Z şekli çizdiklerini varsayar.

Tüm öneriler memnuniyetle karşılandı. Şimdiden teşekkürler.

Answer 1

Hareketle Tanıyıcı 3.0 olarak adlandırılan bu eklenti size Ayrıca

Gesture Recognizer 3.0

almalı adım ne büyük bir fikir verebilir Bana göre, github bu javascript jest tanıma lib bulundu

Jester

Yardım edin.

Answer 2

İster inanın ister inanmayın, ama iki ay önce bu yazıyı buldum ve VR'de sihirli hareketleri tanıma amaçlı bir Unity paketi hazırlayarak VR/AI becerilerimi test etmeye karar verdim. https://ravingbots.itch.io/vr-magic-gestures-ai

tanıma sistemi bir jest vektör izler ve ardından bir 2D ızgara üzerine projeler: Şimdi, geri komple VR demo ile değilim. Sistemin 3 boyutlu şekillerle çalışmasını istiyorsanız, bir 3D ızgarayı da kolayca kurabilirsiniz, ancak çok sayıda şekil varyasyonu yakalayan düzgün bir eğitim seti sağlamayı unutmayın. Tabii

, paket evrenseldir ve siz de olmayan bir sihirli uygulama için kullanabilirsiniz. Kod iyi belgelenmiştir. PDF'ye verilen çevrimiçi dökümantasyon 1000+ sayfa içeriyor: https://files.ravingbots.com/docs/vr-magic-gestures-ai/

Paket HTC Vive ile test edildi. Gear VR ve diğer VR cihazları için destek aşamalı olarak eklenmiştir.

Answer 3

Şahsen ben öneririm AirSig Denetleyicileri kullanarak kimlik doğrulama gibi daha fazla özellik içerir. Vive sürümü ve Oculus sürümü ücretsizdir. "Her koşulda% 100'e kadar doğruluk elde etmek gerçekten çok iyi olur." Benim deneyimim yerleşik jestleri% 90'ın üzerinde doğruluk, imza kısmı% 96'nın üzerindedir. Umarım ihtiyacınıza uyar.