मेटा रिसर्च: कोडेक अवतारों के लिए फोटोरिअलिस्टिक कपड़े

मेटा ने अवतारों के लिए कपड़ों के यथार्थवादी अनुकरण की दिशा में नए शोध साझा किए।

यह क्लोदिंग सॉल्यूशन कोडेक अवतारों के शीर्ष पर बनाया गया है - विकसित करने के लिए मेटा की दीर्घकालिक परियोजना वास्तविक समय में VR हार्डवेयर सेंसर द्वारा संचालित फोटोरिअलिस्टिक अवतार - और एक ही टीम से आते हैं। पारंपरिक प्रतिपादन के बजाय, कोडेक अवतार का विचार किसी दिए गए व्यक्ति की उपस्थिति को जानने के लिए तंत्रिका नेटवर्क की एक श्रृंखला का उपयोग करना है, फिर सेंसर इनपुट के आधार पर अपनी वर्तमान स्थिति को लगातार एन्कोड करना है, और अंत में इस राज्य को ज्यामिति और अंतिम आउटपुट बनावट के रूप में डीकोड करना है। मूल रूप से प्रस्तुत किए जाने के बाद से, कोडेक अवतार टीम ने सिस्टम के कई विकास दिखाए हैं, जैसे कि अधिक यथार्थवादी आंखें, एक संस्करण केवल नेत्र ट्रैकिंग और माइक्रोफ़ोन इनपुट की आवश्यकता हैतक 2.0 संस्करण जो पूर्ण यथार्थवाद तक पहुंचता है, और पीढ़ी केवल का उपयोग कर के साथ एक iPhone FaceID.

नवीनतम शोध, शारीरिक रूप से नकली कपड़ों के लिए गहरी फोटोरिअलिस्टिक उपस्थिति, शरीर के किसी भी प्रकार के कपड़ों के वास्तविक विरूपण के लिए तंत्रिका नेटवर्क लागू करता है:

जैसा कि हम हमेशा ध्यान देते हैं, मेटा स्टिल शिपिंग उत्पादों में इस तरह की निष्ठा तक पहुंचने के लिए एक लंबा रास्ता तय करना है। यह क्लोदिंग सिस्टम वर्तमान में NVIDIA RTX 13 GPU पर केवल 3090 फ्रेम प्रति सेकंड की गति से चलता है। लेकिन मशीन लर्निंग के क्षेत्र में अनुकूलन समय के साथ नाटकीय हो सकता है। स्मार्टफोन पर स्पीच सिंथेसिस और ऑब्जेक्ट रिकग्निशन एल्गोरिदम को आज भी महंगे पीसी जीपीयू की आवश्यकता होती है।

मेटा अवतार आज एक बुनियादी कार्टोनी कला शैली है। उनका यथार्थवाद वास्तव में समय के साथ कम हो गया है, क्वेस्ट 2 के मोबाइल प्रोसेसर पर होराइजन वर्ल्ड्स जैसे ऐप्स में जटिल वातावरण वाले बड़े समूहों के लिए बेहतर अनुकूल होने की संभावना है। हालाँकि, कोडेक अवतार आज के कार्टून अवतारों के सीधे अपडेट के बजाय एक अलग विकल्प के रूप में समाप्त हो सकते हैं। में लेक्स फ्रिडमैन के साथ उनका साक्षात्कार, सीईओ मार्क जुकरबर्ग ने एक ऐसे भविष्य का वर्णन किया जहां आप आकस्मिक खेलों में "अभिव्यक्तिवादी" अवतार और कार्य बैठकों में "यथार्थवादी" अवतार का उपयोग कर सकते हैं।

अप्रैल में कोडेक अवतार टीम का नेतृत्व करने वाले यासर शेख ने कहा कि यह अनुमान लगाना असंभव है कि यह वास्तव में शिपिंग से कितनी दूर है। उन्होंने कहा कि जब परियोजना शुरू हुई तो यह "दस चमत्कार दूर" था और अब उनका मानना ​​​​है कि यह "पांच चमत्कार दूर" है।