Meta Research saa kuulokkeet ja lasit tunnistamaan huonekalut

Metan uusin tekoälytutkimusjärjestelmä saa kuulokkeet ja lasit ymmärtämään huoneesi ulkoasun ja huonekalusi.

Called SceneScript, Meta sanoo, että järjestelmä hyödyntää samaa taustalla olevaa tekniikkaa kuin suuret kielimallit (LLM), paitsi että se ennustaa seuraavan kielifragmentin, se ennustaa arkkitehtonisia ja huonekaluelementtejä 3D-pistepilvessä, joka on samanlainen kuin kuulokkeet jo sieppaavat, jotta se mahdollistaa itsenäisen sijainnin seurannan. .

Tulos on sarja primitiivisiä 3D-muotoja, jotka edustavat tietyn huonekalun tai elementin perusrajoja.

Quest 3 pystyy luomaan raa'an 3D-verkon huoneestasi ja voi päätellä seiniesi, lattiasi ja kattosi sijainnin tästä 3D-verkosta. Mutta kuulokkeet eivät tällä hetkellä tiedä, mitkä tämän verkon muodot edustavat tarkempia elementtejä, kuten ovia, ikkunoita, pöytiä, tuoleja ja sohvia. Quest-kuulokemikrofonien avulla käyttäjät voivat halutessaan merkitä nämä objektit yksinkertaisiksi suorakaiteen muotoisiksi kuutioiksi manuaalisesti, mutta koska tämä on valinnaista ja työlästä, kehittäjät eivät voi luottaa siihen, että käyttäjät ovat tehneet niin.

Jos SceneScriptin kaltainen tekniikka integroitaisiin Quest 3:n sekatodellisuuteen, kehittäjät voisivat automaattisesti sijoittaa virtuaalista sisältöä tiettyjen huonekaluelementtien päälle tai ympärille. Ne voivat korvata vain ikkunasi portaaleilla tai tuolin virtuaalisella istuimella tai muuttaa sohvasi hiekkasäkkiasentoon. Nämä asiat ovat nykyään mahdollisia pyytämällä käyttäjää merkitsemään huonekalut manuaalisesti tai joskus manuaalisilla algoritmeilla, jotka tulkitsevat kohtausverkon, mutta SceneScript voisi tehdä siitä saumattoman ja automaattisen.

SceneScriptin kaltaisella tekniikalla voi myös olla valtava potentiaali tekoälyassistenteille tulevissa kuulokkeissa ja sen mahdolliset AR-lasit. Meta antaa esimerkin kysymyksistä, kuten "Mahtuuko tämä kirjoituspöytä makuuhuoneeseeni?" tai "Kuinka monta astiaa maalia tämän huoneen maalaamiseen tarvitaan?", sekä komennot, kuten "Aseta [AR/MR-sovellus] suurelle pöydälle".

Toistaiseksi Meta kuvailee SceneScriptiä puhtaasti tutkimukseksi, ei lähiajan tuoteominaisuuksien päivitykseksi. Vaikka tämä tekniikka saattaa lopulta tulla Quest 3: een, ei ole vihjeitä, että se tapahtuisi lähiaikoina.

• SEO-pohjainen sisällön ja PR-jakelu. Vahvista jo tänään.
• PlatoData.Network Vertical Generatiivinen Ai. Vahvista itseäsi. Pääsy tästä.
• PlatoAiStream. Web3 Intelligence. Tietoa laajennettu. Pääsy tästä.
• PlatoESG. hiili, CleanTech, energia, ympäristö, Aurinko, Jätehuolto. Pääsy tästä.
• PlatonHealth. Biotekniikan ja kliinisten kokeiden älykkyys. Pääsy tästä.
• Lähde: https://www.uploadvr.com/meta-scenescript-research/