Meta Research omogoča, da slušalke in očala prepoznajo pohištvo

Metin najnovejši raziskovalni sistem z umetno inteligenco omogoča, da slušalke in očala razumejo postavitev vaše sobe in pohištvo.

imenuje SceneScript, Meta pravi, da sistem uporablja isto osnovno tehniko kot veliki jezikovni modeli (LLM), le da namesto predvidevanja naslednjega jezikovnega fragmenta predvideva arhitekturne in pohištvene elemente v 3D-zajemu oblaka točk iste vrste, kot ga že zajemajo slušalke, da omogoči samostojno sledenje položaja. .

Rezultat je serija primitivnih 3D oblik, ki predstavljajo osnovne meje danega pohištva ali elementa.

Quest 3 je sposoben ustvariti neobdelano 3D-mrežo vaše sobe in iz te 3D-mreže lahko sklepa o položajih vaših sten, tal in stropa. Toda slušalke trenutno ne vedo, katere oblike v tej mreži predstavljajo bolj specifične elemente, kot so vrata, okna, mize, stoli in zofe. Slušalke Quest uporabnikom sicer omogočajo, da ročno označijo te predmete kot preproste pravokotne kvadre, če želijo, a ker je to neobvezno in naporno, se razvijalci ne morejo zanesti, da so to storili uporabniki.

Če bi tehnologijo, kot je SceneScript, integrirali v mešano realnost Quest 3, bi lahko razvijalci samodejno postavili virtualno vsebino na določene elemente pohištva ali okoli njih. Lahko bi zamenjali le vaša okna s portali ali vaš stol z navideznim sedežem ali spremenili vašo sedežno garnituro v položaj z vrečami peska. Te stvari so danes možne, če od uporabnika zahtevamo, da ročno označi pohištvo ali včasih z ročnimi algoritmi, ki interpretirajo mrežo prizora, vendar bi SceneScript lahko naredil brezhibno in samodejno.

Tehnologija, kot je SceneScript, bi lahko imela tudi velik potencial za pomočnike AI v prihodnjih slušalkah in njegova morebitna AR očala. Meta daje primer vprašanj, kot je "Ali bo ta miza sodila v mojo spalnico?" ali »Koliko lončkov barve bi potrebovali za prebarvanje te sobe?«, pa tudi ukaze, kot je »Postavite [aplikacijo AR/MR] na veliko mizo«.

Čeprav Meta zaenkrat opisuje SceneScript zgolj kot raziskavo, ne kot kratkoročno posodobitev funkcij izdelka. Čeprav bo ta tehnologija morda sčasoma prišla v Quest 3, ni nobenega namiga, da bi se to zgodilo kmalu.

• Distribucija vsebine in PR s pomočjo SEO. Okrepite se še danes.
• PlatoData.Network Vertical Generative Ai. Opolnomočite se. Dostopite tukaj.
• PlatoAiStream. Web3 Intelligence. Razširjeno znanje. Dostopite tukaj.
• PlatoESG. Ogljik, CleanTech, Energija, Okolje, sončna energija, Ravnanje z odpadki. Dostopite tukaj.
• PlatoHealth. Obveščanje o biotehnologiji in kliničnih preskušanjih. Dostopite tukaj.
• vir: https://www.uploadvr.com/meta-scenescript-research/