यह तकनीक वास्तविक दुनिया को जीवंत कला में बदल सकती है

आभासी दुनिया, वस्तु या व्यक्ति बनाने के लिए शोधकर्ता एक छवि ले सकते हैं और इसे संदर्भ बिंदु के रूप में उपयोग कर सकते हैं।

जैसे-जैसे कंपनियां डिजिटल ट्विन के माध्यम से एक मेटावर्स उपस्थिति का पता लगाती हैं, शैलीबद्ध 3D सामग्री और आभासी दुनिया को जल्दी और आसानी से बनाने की क्षमता केवल आगे बढ़ने के लिए और अधिक महत्वपूर्ण हो जाएगी।

एक हाल ही में प्रकाशित कार्नेल विश्वविद्यालय पेपर ने इस बढ़ती प्रवृत्ति का पता लगाया और स्टाइलिज्ड न्यूरल रेडियंस फील्ड (एसएनईआरएफ) के उत्पादन के लिए एक समाधान विकसित किया जिसका उपयोग पारंपरिक तरीकों की तुलना में अधिक गति से गतिशील आभासी दृश्यों की एक विस्तृत श्रृंखला बनाने के लिए किया जा सकता है।

विभिन्न संदर्भ छवियों का उपयोग करते हुए, की अनुसंधान टीम थू गुयेन-फुओको, फेंग लिउ, तथा लेई जिओ शैलीकृत 3D दृश्य उत्पन्न करने में सक्षम थे जिनका उपयोग विभिन्न आभासी वातावरणों में किया जा सकता था। उदाहरण के लिए, एक VR हेडसेट लगाने की कल्पना करें और देखें कि पाब्लो पिकासो पेंटिंग जैसे स्टाइल वाले लेंस के माध्यम से वास्तविक दुनिया कैसी दिखेगी।

यह प्रक्रिया टीम को न केवल आभासी वस्तुओं को जल्दी से बनाने की अनुमति देती है बल्कि आभासी दुनिया के हिस्से के रूप में अपने वास्तविक दुनिया के वातावरण का उपयोग 3 डी ऑब्जेक्ट डिटेक्शन के साथ करती है। 

यह ध्यान रखना महत्वपूर्ण है कि शोध दल एक ही वस्तु को एक ही दृष्टिकोण पर विभिन्न दृश्य दिशाओं के माध्यम से देखने में सक्षम था, अन्यथा क्रॉस-व्यू स्थिरता के रूप में जाना जाता है। VR में देखने पर यह एक इमर्सिव 3D इफ़ेक्ट बनाता है।

एनईआरएफ और शैलीकरण अनुकूलन चरणों को बारी-बारी से, अनुसंधान दल एक छवि लेने और इसे एक संदर्भ शैली के रूप में उपयोग करने में सक्षम था, फिर वास्तविक दुनिया के वातावरण, वस्तु या व्यक्ति को इस तरह से फिर से बनाने के लिए जो उस छवि की शैली को अनुकूलित करता है, जिससे निर्माण की प्रक्रिया में तेजी लाना।

"हम एनईआरएफ और स्टाइलिज़ेशन ऑप्टिमाइज़ेशन चरणों को बदलकर इस समस्या को हल करने के लिए एक नई प्रशिक्षण विधि पेश करते हैं।" टीम ने कहा। "इस तरह की विधि हमें उच्च रिज़ॉल्यूशन पर छवियों को उत्पन्न करने और अधिक अभिव्यक्तिपूर्ण छवि शैली हस्तांतरण विधियों को अपनाने के लिए हमारी हार्डवेयर मेमोरी क्षमता का पूर्ण उपयोग करने में सक्षम बनाती है। हमारे प्रयोगों से पता चलता है कि हमारी पद्धति इनडोर, आउटडोर और गतिशील दृश्यों सहित सामग्री की एक विस्तृत श्रृंखला के लिए शैलीबद्ध एनईआरएफ का उत्पादन करती है, और क्रॉस-व्यू स्थिरता के साथ उच्च गुणवत्ता वाले उपन्यास दृश्यों को संश्लेषित करती है।

एनईआरएफ की स्मृति सीमाओं के कारण, शोधकर्ताओं को एक और समस्या को भी हल करना पड़ा कि वे वास्तविक समय की तरह महसूस करने वाली गति की दर से अधिक हाई-डेफ 3 डी इमेजरी कैसे प्रस्तुत कर सकते हैं। समाधान प्रदान किए गए विचारों का एक लूप बनाना था जो प्रत्येक पुनरावृत्ति के साथ प्रत्येक पासिंग के साथ शैलीकरण बिंदुओं को अधिक लगातार लक्षित करने में सक्षम था और फिर छवि को और अधिक विवरण के साथ पुनर्निर्माण करता था। 

तकनीक ने अवतारों में भी सुधार किया। शोध दल के एसएनईआरएफ शैलीबद्ध दृष्टिकोण ने उन्हें एक ऐसा अवतार बनाने दिया जो बातचीत के दौरान अधिक अभिव्यंजक था। परिणाम गतिशील 4D अवतार है जो वास्तविक रूप से क्रोध, भय, उत्तेजना और भ्रम जैसी भावनाओं को व्यक्त कर सकता है, सभी इमोजी का उपयोग किए बिना या VR नियंत्रक पर एक बटन दबाए बिना।

शोध कार्य अभी भी जारी है, लेकिन फिलहाल टीम 3डी दृश्य शैलीकरण के लिए एक विधि विकसित करने में सक्षम थी जो उनके पर्यावरण और उनके अवतारों को प्रभावित करने वाले निहित तंत्रिका प्रतिनिधित्व का उपयोग कर रही थी। इसके अतिरिक्त, एक वैकल्पिक शैलीकरण पद्धति का उपयोग करने के उनके दृष्टिकोण ने उन्हें स्थिर और गतिशील 3D दृश्यों को शैलीबद्ध करने के लिए अपनी हार्डवेयर मेमोरी क्षमता के पूर्ण उपयोग का लाभ उठाने की अनुमति दी, जिससे टीम को उच्च रिज़ॉल्यूशन पर छवियां उत्पन्न करने और अधिक अभिव्यंजक छवि शैली हस्तांतरण अपनाने की अनुमति मिली। वीआर में तरीके 

यदि आप विवरण में गहराई से खुदाई करने में रुचि रखते हैं, तो आप उनकी रिपोर्ट तक पहुंच सकते हैं यहाँ उत्पन्न करें.

छवि क्रेडिट: कॉर्नेल विश्वविद्यालय