KinectFusion - वास्तविक समय में एक 3 डी दृश्य का निर्माण

SIGGRAPH में Microsoft अनुसंधान ने एक बहुत ही दिलचस्प विकास का प्रदर्शन किया - KinectFusion । सॉफ्टवेयर _real_ समय को Kinect के डेटा के आधार पर 3D दृश्य को पुनर्स्थापित करने की अनुमति देता है, साथ ही वस्तुओं के विभाजन और ट्रैकिंग भी करता है।

तकनीक प्रभावशाली थी, मुझे लगता है कि अब खेल वास्तविक हो रहे हैं, जिसमें वस्तुओं और पर्यावरण को वास्तविकता से स्थानांतरित करना संभव होगा। वैसे, आप, आखिरकार, और इसके विपरीत, अब 3 डी प्रिंटिंग तकनीक के विकास में तेजी आ सकती है, यह संभव है कि यह जल्द ही उपलब्ध होगा। इस तरह की सस्ती स्कैनिंग और प्रिंटिंग के बाद, हम वास्तविक वस्तुओं को इलेक्ट्रॉनिक रूप से स्थानांतरित करने की क्षमता प्राप्त करते हैं। लेकिन यह निश्चित रूप से सिर्फ एक उपयोग का मामला है।

बिल्ली एक छोटे से वीडियो विश्लेषण के तहत:

• 3 डी मॉडल (त्रिकोणीय जाल) का निर्माण
• बनावट वाले मॉडल
• संवर्धित वास्तविकता - दृश्य में गेंदों को फेंक दें
• संवर्धित वास्तविकता - दृश्य में गेंदों को फेंकना, दृश्य परिवर्तनशील है
• विभाजन - हटाए गए आइटम को रखा जाता है
• ट्रैकिंग - ट्रैक चयनित वस्तु
• विभाजन और ट्रैकिंग - वस्तुओं पर अपनी उंगलियों के साथ आकर्षित करें

3 डी मॉडल (त्रिकोणीय जाल) का निर्माण

यह ध्यान दिया जाता है कि Kinect को अंतरिक्ष में स्थानांतरित किया जा सकता है बजाय आकस्मिक रूप से, घबराना और अचानक आंदोलनों डरावना नहीं है, वास्तविक समय में वर्तमान 3 डी बिंदु बादल को मौजूदा दृश्य के साथ जोड़ा जाता है और दृश्य को संशोधित / पूरा किया जाता है। इस स्तर पर, केवल गहराई डेटा की आवश्यकता है। त्रिकोणासन कुछ धुंधला है, क्योंकि किरणों की ग्रिड 640x480 है, इसलिए आपको विवरण स्पष्ट करने के लिए करीब आने की आवश्यकता है। मुझे लगता है कि भविष्य में वे संकल्प को बढ़ाने में सक्षम होंगे और फिर उपकरण बहुत अधिक गंभीर हो जाएगा। एक अन्य विकल्प ऑप्टिक्स स्थापित करना है ताकि निकटता आप वस्तुओं को विस्तार से स्कैन कर सकें, अब न्यूनतम स्कैनिंग दूरी काफी बड़ी है - 1.2 मीटर।





बनावट वाले मॉडल

Kinect में एक नियमित कैमरा होता है, रंग वहां से लिया जाता है और बनावट बनाई जाती है। दाईं ओर की तस्वीर में एक बनावट वाला मॉडल है जिसके चारों ओर एक प्रकाश स्रोत उड़ता है।



संवर्धित वास्तविकता - दृश्य में गेंदों को फेंक दें

हम दृश्य में गेंदों का एक गुच्छा फेंक देते हैं, वास्तविक समय में GPU पर वे एक त्रिभुज 3 डी दृश्य के साथ बिखरे हुए हैं, और Kinect के एक नियमित वीडियो पर हम अदृश्य गेंदों की क्लिपिंग को ध्यान में रखते हुए इन गेंदों को खींचते हैं।



संवर्धित वास्तविकता - दृश्य में गेंदों को फेंकना, दृश्य परिवर्तनशील है

फिर से, हम गेंदों को मंच पर फेंकते हैं, फ्रेम में व्यक्ति तौलिया से हिलाता है और गेंदें 3 डी दृश्य के साथ बातचीत करती हैं।



विभाजन - जिस वस्तु को हम हटाते हैं उसे रखा जाता है।
मेज पर एक केतली है, दृश्य स्थिर है। हम एक चायदानी लेते हैं और इसे दृश्य से बाहर निकालते हैं, इसे एक अलग वस्तु के रूप में पहचाना जाता है।





ट्रैकिंग - ट्रैक चयनित वस्तु

अगला, केतली को उसके स्थान पर लौटाता है, कार्यक्रम समझता है कि यह वापस आ गया है, फिर हम इसे स्थानांतरित करते हैं और सॉफ्टवेयर इसके आंदोलन को ट्रैक करता है, इसे प्रोटोटाइप के साथ जोड़ देता है।





विभाजन और ट्रैकिंग - वस्तुओं पर अपनी उंगलियों के साथ आकर्षित करें

हाथ एक स्थिर दृश्य की पृष्ठभूमि के खिलाफ खड़ा है, इसे ट्रैक किया जाता है और वस्तुओं की सतहों पर मल्टी-टच टच द्वारा निर्धारित किया जाता है।