Meta חושפת את מערכת Meta Reality Mixed Reality שלה

מעבר צבע סטריאוסקופי, עיגון מרחבי והבנת סצנה יספקו חוויות מציאות מעורבות יותר מציאותיות.

לדברי Sarthak Ray, מנהל מוצר ב-Meta, היכולת לראות ולתקשר עם העולם סביבך באמצעות מציאות מעורבת פותחת הזדמנויות חדשות ל-VR. "אתה יכול לשחק עם חברים באותו חדר פיזי או חוויות פרודוקטיביות המשלבות צגים וירטואליים ענקיים עם כלים פיזיים, וזה צעד לקראת החזון לטווח ארוך יותר שלנו למציאות רבודה."

בניגוד לאמונה הרווחת, חווית מציאות מעורבת היא היעילה ביותר אם מכשיר ה-VR/AR יכול למזג בצורה משכנעת את העולם הפיזי והווירטואלי. המשמעות היא שהאוזניות צריכות לעשות יותר מסתם לספק הזנת וידאו דו-ממדית, לפי א פוסט בבלוג האחרון on Oculus.com.

כדי לקדם את המחויבות שלה לפיתוח טכנולוגיות VR מתקדמות, Meta הכריזה על השקת Meta Reality, מערכת מציאות מעורבת חדשה המציעה מבט מבפנים על מה שנכנס ליצירת חוויה יוצאת דופן.

מעבר צבע סטריאוסקופי למודעות מרחבית

Meta מכירה בחשיבותה של טכנולוגיית מעבר צבע ותלת-ממד סטריאוסקופית בכל הנוגע לאספקת חוויות מציאות מעורבת נוחות וסוחפות.

"Meta Quest Pro משלבת שתי תצוגות מצלמה כדי לשחזר עומק ריאליסטי, מה שמבטיח שחווית מציאות מעורבת שנבנתה באמצעות צבע Passthrough נוחות לאנשים", הסביר מנהל הנדסת ראיית מחשבים של Meta Ricardo Silveira Cabral. "אבל גם רמזים של מרקם סטריאו מאפשרים למוח של המשתמש לעשות את השאר ולהסיק עומק גם כאשר שחזור העומק אינו מושלם או שהוא מעבר לטווח המערכת."

לדוגמה, בעת שימוש ב-Passthrough, המוח שלך לומד שכוס הקפה רחוקה בערך מהיד שלך כמו שהיא רחוקה מהעט שיושב ממש לידך.

Oculus Insight, שיכלה ללכוד רק 100 נקודות עניין כדי לקבוע את מיקום האוזניות בחדר, הייתה טכנולוגיה שסיפקה את מערכת המעקב העצמאית הראשונה עבור מכשיר VR לצרכן. מאז הוא שודרג כדי לאפשר חישה עמוקה. לשם השוואה, Meta Quest Pro יכולה לייצר עד 10,000 נקודות ריבית בשנייה בתנאי תאורה שונים, מה שמאפשר לך ליצור ייצוג תלת מימדי משופר של המרחב הפיזי שלך והכל בזמן אמת.

באמצעות תהליך זה, Meta מסוגלת ליצור מודל תלת מימדי של העולם הפיזי המתעדכן ללא הרף. לאחר מכן תוכל להשתמש בנתונים אלה כדי ליצור מסגרת עיבוד חזוי שיכולה לייצר תמונות של הסביבה האמיתית שלך. כדי לפצות על זמן האחזור של העיבוד, השחזורים מותאמים לתצוגות העין השמאלית והימנית של המשתמשים דרך TimeWarp אסינכרוני אלגוריתם.

לדברי Silveira Cabral, השימוש במצלמה סטריאוסקופית צבעונית מאפשר לצוות לספק פרשנות מציאותית יותר של העולם האמיתי.

הבנת סצינות למיזוג תוכן וירטואלי לעולם הפיזי

רכיב הבנת הסצנות של פלטפורמת הנוכחות הוצג במהלך אירוע Connect 2021. טכנולוגיה זו מאפשרת למפתחים ליצור חוויות מציאות מעורבת מורכבות ומודעת לסצינה. לדברי Wei Lyu, מנהל המוצר של Meta Quest Pro, רכיב ה- Scene Understanding של החברה תוכנן כדי לעזור למפתחים להתמקד בבניית העסקים והחוויות שלהם.

"הצגנו את Scene Understanding כפתרון מערכת", אמר ליו.

הבנת הסצנה מחולקת לשלושה תחומים:

• דגם סצנה - ייצוג יחיד, מקיף, עדכני ומנוהל מערכתית של הסביבה המורכב ממידע גיאומטרי וסמנטי. המרכיבים הבסיסיים של מודל סצנה הם עוגנים. ניתן לחבר כל עוגן לרכיבים שונים. לדוגמה, הסלון של משתמש מאורגן סביב עוגנים בודדים עם תוויות סמנטיות, כגון הרצפה, התקרה, הקירות, השולחן והספה. עוגנים מחוברים עם ייצוג גיאומטרי פשוט: גבול דו-ממדי או תיבה תוחמת תלת-ממדית.
• לכידת סצנה - זרימה מונחית מערכת המאפשרת למשתמשים להסתובב וללכוד את ארכיטקטורת החדר והרהיטים שלהם כדי ליצור מודל סצנה. בעתיד, המטרה תהיה לספק גרסה אוטומטית של Scene Capture שלא דורשת מאנשים לצלם באופן ידני את הסביבה שלהם.
• API של סצנה – ממשק שבו יישומים יכולים להשתמש כדי לגשת למידע מרחבי במודל הסצנה עבור מקרי שימוש שונים, כולל מיקום תוכן, פיזיקה, ניווט וכו'. עם Scene API, מפתחים יכולים להשתמש במודל הסצינה כדי שכדור וירטואלי יקפוץ משטחים פיזיים ב- החדר בפועל או רובוט וירטואלי שיכול להתאים את הקירות הפיזיים.

"הבנת הסצנה מורידה את החיכוך עבור מפתחים, ומאפשרת להם לבנות חוויות MR אמינות וסוחפות ככל האפשר עם אפקטים של חסימה והתנגשות בזמן אמת", הוסיף ריי.

עוגנים מרחביים להצבת אובייקט וירטואלי

מפתחים יכולים ליצור בקלות חוויות מציאות מעורבת מהשורה הראשונה באמצעות Spatial Anchors, שהיא יכולת הליבה של פלטפורמת Meta Quest Pro. לדוגמה, מעצב מוצר יכול לעגן בקלות דגמי תלת מימד מרובים במרחב פיזי באמצעות פלטפורמה כמו גרביטציה כדי ליצור סביבה חלקה עבור המוצר שלהם.

"אם מעבר צבע סטריאוסקופי והבנת סצנה עושים את המשימות הכבדות כדי לאפשר לחוויות MR למזג את העולם הפיזי והווירטואלי, יכולות העיגון שלנו מספקות את רקמת החיבור שמחזיקה הכל ביחד", אמרה מנהלת המוצר של Meta, לורה אונו.

יחד עם מודל הסצנה, ניתן להשתמש בעוגנים מרחביים ליצירת סביבות עשירות ואוטומטיות למגוון חוויות ומצבים. לדוגמה, אתה יכול ליצור דלת וירטואלית שמחוברת לקיר פיזי. זה יהיה צעד ענק עבור חברות שמסתכלות על טכנולוגיית XR עבור הפתרונות הארגוניים שלהן בתאום דיגיטלי, אוטומציה של מחסנים ואפילו רובוטיקה.

לעת עתה, נראה שמטה מתמקדת יותר בחוויות חברתיות. "על ידי שילוב של הבנת סצנה עם עוגנים מרחביים, אתה יכול למזג ולהתאים את חוויות ה-MR שלך לסביבת המשתמש כדי ליצור עולם חדש מלא באפשרויות", לדברי אונו, שמוסיף, "אתה יכול להפוך לסוכן חשאי בסלון שלך. , הצב ריהוט וירטואלי בחדר שלך או שרטט הרחבה על הבית שלך, צור משחקי פיזיקה ועוד."

עוגנים מרחביים משותפים לחוויות משותפים

בנוסף, Meta הוסיפה את תכונת Shared Spatial Anchors לפלטפורמת הנוכחות. זה מאפשר לך ליצור חוויות מקומיות מרובי משתתפים על ידי שיתוף העוגנים שלך עם משתמשים אחרים באותו מרחב. זה יאפשר לך ולחברים אחרים לשחק משחק לוח VR על גבי שולחן פיזי באותו אופן הטיה חמש מספקים את חוויות המשחק שלהם.

שילוב מנצח למציאות מעורבת

השילוב של עוגנים מרחביים, מעבר והבנת סצנה יכול לעזור ליצור סביבה עשירה ואינטראקטיבית שנועדה להיראות ולהרגיש כמו העולם האמיתי. אבינב פאשין, מנהל מוצר של Meta Quest Pro, ציין כי ישנן פשרות רבות הקשורות ביצירת סביבת מציאות מעורבת נהדרת ונוחה למשתמשים.

העתיד של Meta Reality עדיין מתפתח כאשר החברה משפרת ללא הרף את הפלטפורמה באמצעות עדכוני תוכנה וחידושי החומרה שיסופקו בדור הבא של המוצרים שלהם. Silveira Cabral, מנהלת המוצר של Meta Quest Pro, ציינה שהמוצר הראשון של החברה הוא צעד חשוב באבולוציה של Meta Reality.

"אנחנו רוצים ללמוד יחד עם מפתחים כשהם בונים חוויות משכנעות שמגדירות מחדש מה אפשרי עם אוזניות VR. הסיפור הזה עדיין לא שלם - זה רק עמוד ראשון."

קרדיט תמונה: מטא