Meta Research paneb peakomplektid ja prillid mööblit ära tundma

Meta Research paneb peakomplektid ja prillid mööblit ära tundma

Meta Research Makes Headsets & Glasses Recognize Furniture PlatoBlockchain Data Intelligence. Vertical Search. Ai.

Meta uusim tehisintellekti uurimissüsteem võimaldab peakomplektidel ja prillidel mõista teie ruumi paigutust ja mööblit.

Nimetatakse SceneScript, Meta ütleb, et süsteem kasutab sama aluseks olevat tehnikat nagu suured keelemudelid (LLM), välja arvatud see, et järgmise keelefragmendi ennustamise asemel ennustab see arhitektuuri- ja mööblielemente sama tüüpi 3D-punktipilve jäädvustamises, mida peakomplektid juba hõivavad, et võimaldada eraldiseisvat asukoha jälgimist. .

Väljundiks on primitiivsete 3D kujundite jada, mis esindavad antud mööbli või elemendi põhipiire.

Meta SceneScript töös

Quest 3 on võimeline genereerima teie toast töötlemata 3D-silma ning selle 3D-võrgu põhjal järeldada teie seinte, põranda ja lae asukohti. Kuid peakomplekt ei tea praegu, millised kujundid selles võrgus esindavad konkreetsemaid elemente, nagu uksed, aknad, lauad, toolid ja diivanid. Quest-peakomplektid võimaldavad kasutajatel need objektid soovi korral käsitsi märgistada lihtsate ristkülikukujuliste risttahukatena, kuid kuna see on valikuline ja vaevarikas, ei saa arendajad loota, et kasutajad on seda teinud.

Kui Quest 3 segareaalsuse stseeni seadistusse integreeritaks selline tehnoloogia nagu SceneScript, saaksid arendajad automaatselt paigutada virtuaalse sisu konkreetsetele mööblielementidele või nende ümber. Nad võivad asendada ainult teie aknad portaalidega või teie tooli virtuaalse istmega või muuta teie diivani liivakottidesse. Need asjad on tänapäeval võimalikud, paludes kasutajal mööbel käsitsi välja märkida või mõnikord käsitsi stseenivõrku tõlgendavate algoritmidega, kuid SceneScript võib muuta selle sujuvaks ja automaatseks.

Meta SceneScript töös

Tehnoloogial nagu SceneScript võib olla ka tohutu potentsiaal AI-assistentide jaoks tulevastes peakomplektides ja selle võimalikud AR-prillid. Meta toob näite sellistest küsimustest nagu "Kas see laud sobib minu magamistuppa?" või "Mitu potti värvi kuluks selle ruumi värvimiseks?", samuti käsklusi, nagu "Asetage [AR/MR rakendus] suurele lauale".

Praegu kirjeldab Meta SceneScripti puhtalt uurimistööna, mitte toote funktsioonide lähiaja värskendusena. Kuigi see tehnoloogia võib lõpuks jõuda Quest 3-sse, pole ühtegi vihjet, et see niipea juhtuks.

Ajatempel:

Veel alates UploadVR