Meta מציגה את Audio2PhotoReal עבור אינטראקציות Metaverse

Meta מציגה את Audio2PhotoReal עבור אינטראקציות Metaverse

חותמת זמן: 8 בינואר 2024 8:50

Meta הציגה מושג בינה מלאכותית נוספת לתעשיית המטא-וורס. לפי ציוץ אחרון של אלן טי, מחנך ומפתח בינה מלאכותית, החברה פרסמה מסגרת חדשה בשם Audio2Photoreal.

Audio2Photoreal הוא מסגרת ליצירת אווטארים פוטוריאליסטיים בעלי גוף מלא, המונעים באופן טבעי על ידי מחוות על ידי קולו של המחבר. אווטרים אלה מתעוררים לחיים באמצעות אודיו דיבור המשולב בתנועת המחוות של בני אדם.

בהינתן דיבור אודיו גולמי של אנשים, נוצר מודל ליצירת מחוות פוטוריאליסטיות מתאימות. המערכת מורכבת משני מודלים מחוללים המייצגים את קודי ההבעה ותנוחות הגוף של אווטאר.

על פי קטעים שהועלו על ידי אלן טי, חלקים שונים של אדם, כולל הפה, הידיים והפנים, מושפעים מהתוספת הזו.

חלק מהדגמות שפורסמו הן מספר דגימות שנוצרו, שתי שיחות אישיות, דגימה של אווטרים נשיים שנוצרו ותנוחות מדריכות המניעות את מודל הדיפוזיה. אלן טי הוסיף שהמטאוורס הולך להיות כיף עם הפיתוח הזה. במקומות אחרים, קהילת הטכנולוגיה נראית נרגשת בעקבות תגובות על הפוסט. משתמש @EverettWorld צייץ, "אם Metaverse נראה כך, אני בפנים!"

עם זאת, משתמש אחר התרגש מכך שהוא לא סומך יותר על Meta יותר. לפי @AIandDesign, מטא מזיק לבני אדם בעקבות כל העניין של קיימברידג' אנליטיקה. המשתמש מוסיף,

"הכל כל כך מגניב. הלוואי שזה לא היה מטה. אני כבר לא סומך עליהם הרבה. אחרי כל העניין של קיימברידג' אנליטיקה, סיימתי לגמרי עם מטה. הם מזיקים לאנושות. פשוטו כמשמעו. אני ב-FB אבל רק בשביל דברים משפחתיים."

הטכנולוגיה מאחורי קונספט Audio2Photoreal

ArXiv, פלטפורמה אוצרת לשיתוף מחקרים הפתוחה למדענים לחלוק מחקר לפני שהוא עבר ביקורת עמיתים, נתנה תובנות נוספות על Audio2Photoreal.

תנועת הגוף של אווטאר מסונתזת באמצעות מודל דיפוזיה המותנה באודיו או בטקסט, בהתאמה. עבור תנועת הפנים, נבנה מודל דיפוזיה מותנה באודיו מכניסת האודיו.

עם זאת, הגוף והפנים עוקבים אחר דינמיקה שונה מאוד, כאשר הפנים נמצאות בקורלציה חזקה עם שמע הקלט בעוד שלגוף יש מתאם חלש יותר עם דיבור.

Audio2Photoreal של Meta מאפשר כעת אווטרים פוטוריאליסטיים המופעלים על ידי קול

Audio2Photoreal של Meta מאפשר כעת אווטרים פוטוריאליסטיים המופעלים על ידי קול

החשיבות של Audio2Photoreal במטא-וורס 

המעורבות של Meta ב- Metaverse מכוונת להפוך את המערכת האקולוגית למציאותית יותר. אווטרים אלו של Audio2Photoreal יכולים לשקף את הבעת הפנים ומחוות הגוף של אדם באמצעות שימוש באודיו.

זה יוצר קשר דומה לזה שאנשים מנהלים שיחה פנים אל פנים. לאדם יהיו תכונות פיזיות ייחודיות כמו גובה, צבע עור ושיער, מבנה גוף ותכונות מדויקות אחרות. עבודה ב מערכת אקולוגית מטאורסית הופך גמיש יותר מכיוון שאינו דורש מצלמות אינטרנט, סרטונים או מצלמות סמארטפון איכותיות.

פייסבוק, X ואינסטגרם תובעות את אוהיו כדי להפסיק את חוק המדיה החברתית

בפיתוח אחר אחרון, NetChoice, חברה המייצגת פלטפורמות מדיה חברתית כמו פייסבוק, אינסטגרם ו-X, הגישה תביעה משפטית נגד חוק המדיה החברתית החדש של אוהיו ב-5 בינואר.

החברה פרסמה תביעה בת 34 עמודים כדי לחסום את חוק הודעת ההורים במדיה החברתית של אוהיו, שהיה נכנס לתוקף ב-15 בינואר, אך רק על חשבונות שנוצרו לאחר התאריך האמור.

חוק המדיה החברתית מתעקש שפלטפורמות צריכות לקבל הסכמת הורים עבור המשתמשים שלהן בני 16 ומטה. עם זאת, בתביעה נכתב כי החוק "יציב מכשול משמעותי על יכולתם של קטינים מסוימים לעסוק בדיבור באתרים אלה".

בול זמן:

עוד מ מטא ניוז