محققان متا ردیابی بدن Quest 2 را بدون ردیاب اضافی نشان می دهند

محققان متا ردیابی بدن Quest 2 را بدون ردیاب اضافی نشان دادند.

سیستم‌های واقعیت مجازی فعلی با هدست و کنترل‌کننده‌های نگهدارنده عرضه می‌شوند، بنابراین فقط موقعیت سر و دست‌های خود را ردیابی کنید. موقعیت آرنج، تنه و پاهای شما را می توان با استفاده از کلاسی از الگوریتم ها به نام سینماتیک معکوس (IK) تخمین زد، اما این فقط گاهی اوقات برای آرنج دقیق است و به ندرت برای پاها درست است. راه حل های بالقوه زیادی برای هر مجموعه معین از موقعیت های سر و دست وجود دارد.

با توجه به محدودیت های IK، برخی اپلیکیشن‌های VR امروزه فقط دست‌های شما را نشان می‌دهند و بسیاری از آنها فقط بالاتنه را به شما می‌دهند. هدست های رایانه شخصی با استفاده از ردیابی SteamVR از ردیاب های اضافی مانند ردیاب Vive HTCاما سه مورد مورد نیاز برای ردیابی بدن 350 دلار هزینه دارند و بنابراین در اکثر بازی ها پشتیبانی نمی شود.

ولی در مقاله جدیدی با عنوان QuestSimمحققان Meta سیستمی را نشان دادند که توسط یک شبکه عصبی هدایت می‌شود که می‌تواند یک حالت کامل بدن قابل قبول را فقط با داده‌های ردیابی Quest 2 و کنترل‌کننده‌های آن تخمین بزند. هیچ ردیاب یا سنسور خارجی اضافی مورد نیاز نیست.

حرکت آواتار به دست آمده تقریباً با حرکت واقعی کاربر مطابقت دارد. محققان حتی ادعا می‌کنند که دقت و لرزش حاصل از ردیاب‌های فرسوده IMU برتر است - دستگاه‌هایی که فقط دارای شتاب‌سنج و ژیروسکوپ هستند مانند Pico 4. گروه تناسب اندام پیکو (پیکو ادعا می کند که روی الگوریتم یادگیری ماشین خودش کار می کند).

با این حال، اینجا یک شکار وجود دارد. همانطور که در ویدئو مشاهده می شود، این سیستم برای اولویت بندی تولید یک معقول طراحی شده است تمام قد روی موقعیت قرار بگیرید تا مطمئن شوید که دست‌های آواتار با موقعیت دقیق دست‌های کاربر مطابقت دارند. تأخیر سیستم نیز 160 میلی‌ثانیه است - بیش از 11 فریم در 72 هرتز. با توجه به این مسائل، QuestSim فقط برای دیدن بدنه‌های آواتار افراد دیگر مناسب است، نه دیدن بدن خود هنگام نگاه کردن به پایین.

اما با این حال، دیدن حرکت تمام بدن آواتارهای افراد دیگر نسبت به بالاتنه‌های بدون پا که اغلب مورد انتقاد قرار می‌گیرند آواتارهای فعلی متا، بسیار ارجحیت دارد. بنابراین آیا این سیستم یا چیزی شبیه به آن به Quest 2 می آید؟

اندرو باسورث، مدیر ارشد فناوری متا، قطعا هفته گذشته به این موضوع اشاره کرده است. چه زمانی در مورد ردیابی پا در اینستاگرام پرسیده شد «هر چیزی از من بپرس» باسورث پاسخ داد:

"بله، ما را به خاطر آواتارهای بدون پا مسخره کردند، و من فکر می کنم این بسیار منصفانه است و فکر می کنم خیلی خنده دار است.

داشتن پاهایی در آواتار خود که با پاهای واقعی شما مطابقت ندارد برای مردم بسیار نگران کننده است. اما مطمئناً ما می توانیم روی افراد دیگر پا بگذاریم، که شما می توانید آن را ببینید، و این اصلا شما را آزار نمی دهد.

بنابراین، ما روی پاهایی کار می‌کنیم که برای کسی که تماشاچی است طبیعی به نظر می‌رسد – زیرا آنها نمی‌دانند پاهای واقعی شما در واقع چگونه قرار گرفته‌اند – اما احتمالاً وقتی به پاهای خود نگاه می‌کنید، همچنان چیزی نمی‌بینید. این استراتژی فعلی ماست.»

راه حل کوتاه مدت ممکن است با همان کیفیت این الگوریتم نباشد. مقالات تحقیقاتی یادگیری ماشین روی پردازنده‌های گرافیکی قدرتمند رایانه شخصی با نرخ فریم نسبتا پایین اجرا می‌شوند. در این مقاله به عملکرد سیستم توضیح داده شده اشاره نشده است، اما یک RTX 3080 به عنوان مورد استفاده برای آموزش فهرست شده است.

رویداد سالانه AR/VR Meta Connect برگزار می‌شود در کمتر از 2 هفته، بنابراین هرگونه اعلام ردیابی بدن احتمالاً در طول آن انجام می شود.