يحتوي Quest 3 الآن على تتبع للجسم من الداخل إلى الخارج وتغطية بالرنين المغناطيسي

يحتوي Quest 3 الآن على تتبع للجسم من الداخل إلى الخارج وتغطية بالرنين المغناطيسي

يمكن لمطوري Quest 3 الآن دمج ثلاث ميزات جديدة رئيسية لتحسين الواقع الافتراضي والمختلط.

كان تتبع الجسم من الداخل إلى الخارج (IOBT) والأرجل التوليدية تم الإعلان عنه جنبًا إلى جنب مع Quest 3 كما سيأتي في ديسمبر. كان هناك انسداد للواقع المختلط عبر Depth API في السابق كانت ميزة تجريبية، مما يعني أن المطورين يمكنهم اختباره ولكن لا يمكنهم شحنه في إصدارات Quest Store أو App Lab.

جميع الميزات الثلاث متاحة الآن كجزء من v60 SDK للوحدة والتعليمات البرمجية الأصلية. وفي الوقت نفسه، يتضمن تكامل v60 Unreal Engine Depth API، ولكن ليس IOBT أو Geneative Legs.

تتبع الجزء العلوي من الجسم من الداخل إلى الخارج

يستخدم تتبع الجسم من الداخل إلى الخارج (IOBT) الكاميرات الجانبية لـ Quest 3، والتي تواجه الأسفل، لتتبع معصمك ومرفقيك وكتفك وجذعك باستخدام خوارزميات رؤية الكمبيوتر المتقدمة.

يمنع IOBT المشكلات المتعلقة بالأذرع المقدرة للحركيات العكسية (IK)، والتي غالبًا ما تكون غير صحيحة وتشعر بعدم الارتياح لأن النظام يقوم فقط بالتخمين من موقع رأسك ويديك. عندما يقوم المطورون بدمج IOBT، سترى ذراعيك وتورو في مواقعهما الفعلية - وليس تقديرًا.

يتيح تتبع الجزء العلوي من الجسم أيضًا للمطورين تثبيت حركة عصا الإبهام في اتجاه جسمك، وليس فقط رأسك أو يديك، ويمكنك تنفيذ إجراءات جديدة مثل الانحناء فوق الحافة وجعل هذا العرض واقعيًا على الصورة الرمزية الخاصة بك.

أرجل الذكاء الاصطناعي التوليدية

يعمل IOBT فقط على الجزء العلوي من الجسم. بالنسبة للجزء السفلي من جسمك، أطلقت Meta منتج Geneative Legs.

تستخدم شركة Geneative Legs نموذج الذكاء الاصطناعي "المتطور" لتقدير أوضاع ساقيك - وهي تقنية تستخدمها الشركة البحث لسنوات

في Quest 3، توفر Geneative Legs تقديرًا أكثر واقعية من سماعات الرأس السابقة بفضل استخدام تتبع الجزء العلوي من الجسم كمدخل، ولكنها تعمل أيضًا في Quest Pro وQuest 2 باستخدام الرأس واليدين فقط.

يعد نظام Geneative Legs مجرد جهاز تقدير، وليس تتبعًا، لذلك على الرغم من أنه يمكنه اكتشاف القفز والانحناء، إلا أنه لن يلتقط العديد من الحركات الفعلية مثل رفع ركبتيك.

معًا، يعمل تتبع الجزء العلوي من الجسم من الداخل إلى الخارج والأرجل التوليدية على تمكين أجسام كاملة معقولة في الواقع الافتراضي، تسمى تركيب كامل الجسم، بدون أجهزة خارجية.

أعلنت Meta سابقًا أن لعبة Full Body Synthesis ستأتي إلى Supernatural وSwordsman VR وDrunken Bar Fight.

واجهة برمجة تطبيقات العمق للانسداد في الواقع المختلط

In مراجعة مهمتنا 3 لقد انتقدنا بشدة عدم وجود انسداد ديناميكي للواقع المختلط. على الرغم من أن الكائنات الافتراضية يمكن أن تظهر خلف شبكة المشهد الخام التي تم إنشاؤها بواسطة فحص إعداد الغرفة، إلا أنها تظهر دائمًا أمام الكائنات المتحركة مثل ذراعيك والأشخاص الآخرين حتى لو كانوا بعيدًا، الأمر الذي يبدو مزعجًا وغير طبيعي.

يحتوي Quest 3 الآن على تتبع داخلي وخارجي للجسم وتغطية MR وذكاء بيانات PlatoBlockchain. البحث العمودي. منظمة العفو الدولية.
الوصف الأساسي للمفهوم العام للانسداد من ميتا.

يمكن للمطورين بالفعل تنفيذ انسداد ديناميكي ليديك باستخدام شبكة تتبع اليد، ولكن القليل منهم فعلوا ذلك لأن هذا يقطع عند معصمك بحيث لا يتم تضمين بقية ذراعك.

تمنح واجهة Depth API الجديدة للمطورين خريطة عمق خشنة لكل إطار تم إنشاؤها بواسطة سماعة الرأس من وجهة نظرها. يمكن استخدام هذا لتنفيذ الحجب، سواء بالنسبة للكائنات المتحركة أو للحصول على تفاصيل أكثر دقة للكائنات الثابتة نظرًا لأنه ربما لم يتم التقاطها في Scene Mesh.

يجب أن يجعل الإطباق الديناميكي الواقع المختلط في المهمة 3 يبدو أكثر طبيعية. ومع ذلك، فإن دقة استشعار عمق سماعة الرأس هي جدا منخفضة، لذلك لن تلتقط تفاصيل مثل المسافات بين أصابعك وسترى فجوة فارغة حول حواف الكائنات.

يُقترح أيضًا رفع خريطة العمق إلى 4 أمتار فقط، وبعد ذلك "تنخفض الدقة بشكل كبير"، لذلك قد يرغب المطورون أيضًا في استخدام Scene Mesh للإغلاق الثابت.

هناك طريقتان يمكن للمطورين من خلالهما تنفيذ عملية الغلق: الصلبة والناعمة. Hard مجاني بشكل أساسي ولكن به حواف خشنة، بينما Soft له تكلفة GPU ولكنه يبدو أفضل. بالنظر إلى مقطع مثال Meta، من الصعب تخيل أن أي مطور سيختار Hard.

في كلتا الحالتين، يتطلب الحجب استخدام تظليل الحجب الخاص بـ Meta أو تنفيذه على وجه التحديد في التظليل المخصص الخاص بك. إنه ليس حلاً بنقرة واحدة ومن المحتمل أن يكون بمثابة جهد كبير للمطورين لدعمه.

بالإضافة إلى الحجب، يمكن للمطورين أيضًا استخدام Depth API لتنفيذ تأثيرات بصرية قائمة على العمق في الواقع المختلط، مثل الضباب.

اختبار UploadVR لإغلاق واجهة برمجة التطبيقات للعمق.

يمكنك العثور على وثائق ل الوحدة هنا ولل غير واقعي هنا. لاحظ أنه لم يتم تحديث الوثائق حتى الآن لتعكس الإصدار العام.

الطابع الزمني:

اكثر من UploadVR