गतिशील हाथ इशारा मान्यता का उपयोग करके संवर्धित वास्तविकता असेंबली ट्यूटोरियल में प्रगति अवलोकन

हम एक प्रमाण-कॉन्सेप्ट संवर्धित वास्तविकता असेंबली ट्यूटोरियल अनुप्रयोग का प्रस्ताव करते हैं जो उपयोगकर्ता को असेंबली निर्देश चरणों के माध्यम से मार्गदर्शन करने के लिए एक वीडियो-देखने योग्य हेडसेट का उपयोग करता है। यह पूरी तरह से उपयोगकर्ता की काम के टुकड़े के साथ भौतिक इंटरैक्शन को देखकर नियंत्रित किया जाता है। ट्यूटोरियल स्वचालित रूप से आगे बढ़ता है, अगले निर्देश की ओर प्रगति का अनुमान लगाने के लिए हाथ के इशारा वर्गीकरण का उपयोग करता है। गतिशील हाथ इशारा वर्गीकरण के लिए, हम वास्तविक समय में उपयोगकर्ता के हाथ की गति को वर्गीकृत करने के लिए एक न्यूरल नेटवर्क मॉड्यूल को एकीकृत करते हैं। हम अपने अनुप्रयोग में उपयोग किए गए सीखे गए मॉडल का मूल्यांकन करते हैं ताकि अप्रत्यक्ष इशारी इंटरैक्शन के प्रदर्शन के बारे में अंतर्दृष्टि प्रदान की जा सके।