काइनेक्ट का उपयोग करके हाथ की कलाकृतियों का कुशल मॉडल-आधारित 3डी ट्रैकिंग

हम काइनेक्ट सेंसर द्वारा प्राप्त मार्करलेस दृश्य अवलोकनों से मानव हाथ की 3डी स्थिति, उन्मुखीकरण और पूरी कलाकृति को पुनः प्राप्त करने और ट्रैकिंग करने की समस्या का एक नया समाधान प्रस्तुत करते हैं। हम इसे एक ऑप्टिमाइजेशन समस्या के रूप में मानते हैं, जिसका उद्देश्य हाथ के मॉडल के उन पैरामीटरों को खोजना है जो हाथ के मॉडल के अनुमानों और वास्तविक हाथ के अवलोकनों की उपस्थिति और 3डी संरचना के बीच का भिन्नता कम करते हैं। इस ऑप्टिमाइजेशन समस्या को पार्टिकल स्वार्म ऑप्टिमाइजेशन (पीएसओ) के एक प्रकार का उपयोग करके प्रभावी रूप से हल किया जाता है। प्रस्तावित विधि को विशेष मार्करों और/या एक जटिल छवि अधिग्रहण सेटअप की आवश्यकता नहीं है। मॉडल आधारित होने के नाते, यह हाथ की कलाकृतियों को ट्रैक करने की समस्या का निरंतर समाधान प्रदान करता है। प्रस्तावित विधि के प्रोटोटाइप GPU-आधारित कार्यान्वयन के साथ विस्तृत प्रयोग यह दर्शाते हैं कि हाथ की कलाकृतियों का सटीक और मजबूत 3डी ट्रैकिंग लगभग वास्तविक समय (15Hz) में प्राप्त किया जा सकता है।