Meta Research fa sì che cuffie e occhiali riconoscano i mobili

L'ultimo sistema di ricerca AI di Meta consente a cuffie e occhiali di comprendere la disposizione e i mobili della stanza.

Chiamato SceneScript, Meta afferma che il sistema sfrutta la stessa tecnica di base dei modelli linguistici di grandi dimensioni (LLM), tranne che invece di prevedere il frammento linguistico successivo prevede elementi architettonici e di arredamento all'interno di un'acquisizione di nuvole di punti 3D dello stesso tipo che i visori già acquisiscono per consentire il tracciamento posizionale autonomo. .

L'output è una serie di forme 3D primitive che rappresentano i confini di base del mobile o dell'elemento dato.

Quest 3 è in grado di generare una mesh 3D grezza della tua stanza e può dedurre le posizioni delle pareti, del pavimento e del soffitto da questa mesh 3D. Ma il visore al momento non sa quali forme all'interno di questa mesh rappresentano elementi più specifici come porte, finestre, tavoli, sedie e divani. Le cuffie Quest consentono agli utenti di contrassegnare manualmente questi oggetti come semplici cuboidi rettangolari, se lo desiderano, ma poiché questo è facoltativo e arduo, gli sviluppatori non possono fare affidamento sul fatto che gli utenti lo facciano.

Se una tecnologia come SceneScript fosse integrata nella configurazione della scena di realtà mista di Quest 3, gli sviluppatori potrebbero posizionare automaticamente contenuti virtuali su o attorno a specifici elementi di arredamento. Potrebbero sostituire semplicemente le finestre con dei portali, o la sedia con un sedile virtuale, o trasformare il divano in una posizione in cui è intrappolato un sacco di sabbia. Queste cose sono possibili oggi chiedendo all'utente di delimitare i mobili manualmente, o talvolta con algoritmi manuali che interpretano la mesh della scena, ma SceneScript potrebbe renderlo fluido e automatico.

Tecnologie come SceneScript potrebbero anche avere un enorme potenziale per gli assistenti IA nei futuri visori e dispositivi i suoi eventuali occhiali AR. Meta fornisce l'esempio di domande come "Questa scrivania si adatterà alla mia camera da letto?" o "Quanti barattoli di vernice ci vorrebbero per dipingere questa stanza?", così come comandi come "Posiziona [l'app AR/MR] sul tavolo grande".

Per ora, però, Meta descrive SceneScript esclusivamente come una ricerca, non come un aggiornamento delle funzionalità del prodotto a breve termine. Sebbene questa tecnologia possa eventualmente arrivare a Quest 3, non vi è alcun suggerimento che ciò accada presto.

• Distribuzione di contenuti basati su SEO e PR. Ricevi amplificazione oggi.
• PlatoData.Network Generativo verticale Ai. Potenzia te stesso. Accedi qui.
• PlatoAiStream. Intelligenza Web3. Conoscenza amplificata. Accedi qui.
• PlatoneESG. Carbonio, Tecnologia pulita, Energia, Ambiente, Solare, Gestione dei rifiuti. Accedi qui.
• Platone Salute. Intelligence sulle biotecnologie e sulle sperimentazioni cliniche. Accedi qui.
• Fonte: https://www.uploadvr.com/meta-scenescript-research/