सांख्यिकीय छवि-आधारित आकार मॉडल के साथ 3डी संरचना का अनुमान लगाना

हम एक छवि-आधारित दृष्टिकोण प्रस्तुत करते हैं ताकि संभाव्य "आकार+संरचना" मॉडल का उपयोग करके 3डी संरचना के पैरामीटर का अनुमान लगाया जा सके। एक वस्तु वर्ग का 3डी आकार उन सिल्हूट दृष्टियों से एक साथ देखे गए कंटूर के सेट द्वारा प्रस्तुत किया गया है जो कई कैलिब्रेटेड कैमरों से हैं, जबकि वस्तु पर रुचि के संरचनात्मक विशेषताओं को कई 3डी स्थानों द्वारा दर्शाया गया है। मल्टीव्यू आकार और संबंधित संरचना पर प्राथमिक घनत्व संभाव्य प्रमुख घटक विश्लेषक के मिश्रण के साथ निर्मित किया गया है। नए कंटूर के सेट के साथ, हम नए आकार के बायेसियन पुनर्निर्माण से अज्ञात संरचना पैरामीटर का अनुमान लगाते हैं। मॉडल मिलान और पैरामीटर अनुमान पूरी तरह से छवि डोमेन में किए जाते हैं और इसके लिए कोई स्पष्ट 3डी निर्माण की आवश्यकता नहीं होती। हमारा आकार मॉडल संरचना का सटीक अनुमान लगाने में सक्षम है, भले ही सेगमेंटेशन त्रुटियाँ या इनपुट सिल्हूट में गायब दृश्य हों, और यह केवल एकल इनपुट दृष्टि के साथ भी काम करता है। हजारों पैदल यात्री छवियों के प्रशिक्षण सेट का उपयोग करते हुए, जो एक कृत्रिम मॉडल से उत्पन्न होते हैं, हम वास्तविक छवियों से देखे गए सिल्हूट कंटूर के आधार पर शरीर पर 19 जोड़ियों के 3डी स्थानों का सटीक अनुमान लगाने में सक्षम हैं।