חוקרי מטה מדגימים מעקב אחר גוף Quest 2 ללא עוקבים נוספים

חוקרי מטה הדגימו מעקב אחר גוף Quest 2 ללא עוקבים נוספים.

מערכות VR נוכחיות נשלחות עם אוזניות ובקרים מוחזקים, אז עקוב רק אחר מיקום הראש והידיים שלך. ניתן להעריך את מיקום המרפקים, הגו והרגליים באמצעות מחלקה של אלגוריתמים הנקראים קינמטיקה הפוכה (IK), אבל זה רק מדויק לפעמים למרפקים ולעיתים רחוקות נכון לרגליים. יש יותר מדי פתרונות פוטנציאליים עבור כל סט נתון של תנוחות ראש ויד.

בהתחשב במגבלות של IK, חלקם אפליקציות VR היום מציגות רק את הידיים שלך, ורבות מעניקות לך רק פלג גוף עליון. אוזניות מחשב המשתמשות במעקב SteamVR תומכות בגששים נוספים שחוקים כגון Vive Tracker של HTC, אבל השלושה הדרושים למעקב אחר הגוף עולים צפונית ל-$350 ולכן זה לא נתמך ברוב המשחקים.

אבל ב מאמר חדש בשם QuestSim, חוקרי Meta הדגימו מערכת המונעת על ידי רשת עצבית שיכולה להעריך תנוחת גוף מלאה סבירה רק עם נתוני המעקב מ-Quest 2 והבקרים שלו. אין צורך במעקבים נוספים או בחיישנים חיצוניים.

תנועת האווטאר המתקבלת תואמת את התנועה האמיתית של המשתמש באופן הדוק למדי. החוקרים אפילו טוענים שהדיוק והריצוד המתקבלים עדיפים על עוקבי IMU שחוקים - מכשירים עם מד תאוצה וג'ירוסקופ בלבד כמו שהוכרז של Pico 4 Pico Fitness Band (פיקו טוענת שהיא עובדת על אלגוריתם למידת מכונה משלה).

עם זאת, יש כאן מלכוד. כפי שניתן לראות בסרטון, מערכת זו נועדה לתת עדיפות להפקת סביר גוף מלא תנוחה מעל כדי להבטיח שהידיים של האווטאר תואמות את המיקום המדויק של הידיים של המשתמש. זמן האחזור של המערכת הוא גם 160ms - יותר מ-11 פריימים בתדר 72Hz. בהתחשב בבעיות הללו, QuestSim יתאים רק לראות גופות אווטאר של אנשים אחרים, לא לראות את הגוף שלך כשאתה מסתכל למטה.

אבל עדיין, לראות תנועת גוף מלאה של אווטרים של אנשים אחרים תהיה עדיפה בהרבה על פלג הגוף העליון חסר הרגליים של האווטרים הנוכחיים של מטה. אז האם המערכת הזו, או משהו דומה לה, מגיעה ל-Quest 2?

נראה כי המטא CTO אנדרו בוסוורת' בהחלט רמז על כך בשבוע שעבר. מתי נשאל על מעקב אחר רגליים באינסטגרם "שאל אותי כל דבר" בוסוורת' הגיב:

"כן צחקו עלינו הרבה בגלל האווטרים חסרי הרגליים, ואני חושב שזה מאוד הוגן ואני חושב שזה די מצחיק.

להחזיק רגליים על הדמות שלך שאינן תואמות לרגליים האמיתיות שלך מטריד מאוד אנשים. אבל כמובן שאנחנו יכולים לשים רגליים על אנשים אחרים, שאתה יכול לראות, וזה לא מפריע לך בכלל.

אז אנחנו עובדים על רגליים שנראות טבעיות למישהו שהוא צופה מהצד - כי הם לא יודעים איך הרגליים האמיתיות שלך ממוקמות בפועל - אבל כנראה שאתה כשתסתכל על הרגליים שלך תמשיך לא לראות כלום. זו האסטרטגיה הנוכחית שלנו".

ייתכן שהפתרון לטווח הקצר לא יהיה באותה איכות של האלגוריתם הזה. מאמרי מחקר של למידת מכונה נוטים לרוץ על GPUs PC חזקים בקצב פריימים נמוך יחסית. המאמר אינו מזכיר את הביצועים של המערכת המתוארת, אך RTX 3080 רשום כמשמש לאימון.

אירוע ה-AR/VR השנתי של Meta Connect מתקיים בעוד קצת יותר משבועיים, כך שככל הנראה כל הכרזת מעקב אחר הגוף תתקיים במהלכה.