Meta-tutkijat osoittivat päivityksen tekoälyllä toimivaan kehon asentoarvioinsa.
Nykyiset VR-järjestelmät seuraavat vain pään ja käsien asentoa. Kyynärpäiden, vartalon ja jalkojen sijainti voidaan arvioida käyttämällä algoritmiluokkaa, jota kutsutaan käänteiskinematiikaksi (IK), mutta tämä on tarkka vain toisinaan kyynärpäille ja harvoin jalkojen kohdalla. Jokaiselle pään ja käden asennon joukolle on aivan liian monia mahdollisia ratkaisuja. IK:n rajoitukset huomioon ottaen jotkin VR-sovellukset näyttävät nykyään vain kätesi, ja monet antavat sinulle vain ylävartalon.
Älypuhelinsovellukset voivat nyt tarjota VR-kehon seurantaa tietokonenäön avulla, mutta tämä edellyttää puhelimen asentamista nurkkaan ja toimii oikein vain, kun olet sitä päin. SteamVR-seurantaa käyttävät PC-kuulokkeet tukevat laadukkaampaa kehon seurantaa kuluneiden lisäseurantalaitteiden, kuten esim HTC:n Vive Tracker, mutta niiden ostaminen tarpeeksi kehon seurantaa varten maksaa satoja dollareita ja jokainen on ladattava.
Viime vuonna kolme Meta-tutkijaa esitteli QuestSimiä, vahvistusoppimismalli, joka voi arvioida uskottavan koko kehon asennon vain Quest 2:n ja sen ohjaimien seurantatiedoilla. Ylimääräisiä seurantalaitteita tai ulkoisia antureita ei tarvita. Tuloksena oleva avatar-liike vastaa melko tarkasti käyttäjän todellista liikettä. Tutkijat jopa väittivät, että tuloksena oleva tarkkuus ja värinä ovat parempia kuin kuluneet IMU-seurantalaitteet – laitteet, joissa on vain kiihtyvyysanturi ja gyroskooppi, kuten esim. Sonyn Mocopi.
Mutta yksi reunakotelo QuestSim epäonnistui, kun käyttäjä on vuorovaikutuksessa todellisen maailman kanssa, kuten istuessaan tuolilla tai sohvalla. Tämän käsitteleminen, erityisesti siirtyminen istumisesta seisomaan, on ratkaisevan tärkeää sosiaalisen VR:n uskottavalle kokovartalolle.
Uudessa lehdessä nimeltä etsintäenvSim, samat kolme tutkijaa ja kaksi muuta esittelevät päivitetyn mallin, joka käyttää edelleen samaa vahvistusoppimismenetelmää, joka ottaa huomioon huonekalut ja muut ympäristössä olevat esineet:
Kuten videolta näet, tulokset ovat melko vaikuttavia. Älä kuitenkaan odota, että QuestEnvSim käynnistyy Quest 2:ssasi lähiaikoina. Kuten alkuperäisessä QuestSimissa, tässä on useita tärkeitä varoituksia.
Ensinnäkin, paperi ei mainitse kuvatun järjestelmän ajonaikaista suorituskykyä. Koneoppimisen tutkimuspaperit toimivat yleensä tehokkailla PC-grafiikkasuorittimilla suhteellisen alhaisella kehysnopeudella, joten voi kestää vuosia, ennen kuin tämä voi toimia tehokkaasti reaaliajassa.
Toiseksi käytetyt huonekalut ja esineet skannattiin manuaalisesti ja sijoitettiin virtuaaliympäristöön. Sillä aikaa Quest 3 voi ehkä olla kykenevä Quest 2:lla ja Quest Prolla ei ole tätä tärkeää anturidataa, kun se skannaa huonekaluja automaattisesti syvyysanturin kautta.
Lopuksi nämä järjestelmät on suunniteltu tuottamaan uskottava yleinen kokovartaloasento, ei vastaa tarkkaa käsien asentoa. Järjestelmän latenssi vastaa myös monia VR:n kehyksiä. Nämä lähestymistavat eivät siis toimisi hyvin alaspäin katsomiseen oma kehon VR:ssä, vaikka ne voisivat toimia reaaliajassa.
Mutta silti, olettaen, että järjestelmä voitaisiin lopulta optimoida, muiden ihmisten avatarien koko kehon liikkeen näkeminen olisi paljon parempi vaihtoehto kuin Metan nykyisten avatarien usein kritisoidut jalattomat ylävartalot. Metan teknologiajohtaja Andrew Bosworth näytti vihjaavan, että tämä olisi Metan lopullinen lähestymistapa viime vuonna. Kun kysyttiin jalkojen seurannasta Instagramin "kysy minulta mitä tahansa" -istunnossa Bosworth vastasi:
”Oman avatarin jalat, jotka eivät vastaa todellisia jalkojasi, ovat hyvin hämmentäviä ihmisille. Mutta toki saamme laittaa jalat toisille, sen näkee, eikä se haittaa yhtään.
Joten työskentelemme sellaisten jalkojen parissa, jotka näyttävät luonnollisilta jonkun sivullisen silmissä – koska he eivät tiedä, kuinka oikeat jalkasi ovat todellisuudessa – mutta luultavasti sinä, kun katsot omia jalkojasi, et edelleenkään näe mitään. Se on nykyinen strategiamme."
- SEO-pohjainen sisällön ja PR-jakelu. Vahvista jo tänään.
- PlatoData.Network Vertical Generatiivinen Ai. Vahvista itseäsi. Pääsy tästä.
- PlatoAiStream. Web3 Intelligence. Tietoa laajennettu. Pääsy tästä.
- PlatoESG. Autot / sähköautot, hiili, CleanTech, energia, ympäristö, Aurinko, Jätehuolto. Pääsy tästä.
- BlockOffsets. Ympäristövastuun omistuksen nykyaikaistaminen. Pääsy tästä.
- Lähde: https://www.uploadvr.com/meta-ai-quest-body-estimation-environment-awareness/
- :on
- :On
- :ei
- 200
- 2023
- a
- Meistä
- Tili
- tarkkuus
- tarkka
- todella
- AI-käyttöinen
- algoritmit
- Kaikki
- Myös
- an
- ja
- Andrew
- Andrew Bosworth
- Kaikki
- mitään
- lähestymistapa
- lähestymistavat
- sovellukset
- OVAT
- AS
- At
- automaattisesti
- avatar
- avatarit
- BE
- koska
- välillä
- elimet
- elin
- Kehon seuranta
- Laatikko
- mutta
- Ostaminen
- by
- nimeltään
- CAN
- tapaus
- Tuoli
- peritään
- väitti
- luokka
- tarkasti
- KOM
- tietokone
- Tietokoneen visio
- pitoisuus
- jatkaa
- Kulma
- korjata
- kustannukset
- voisi
- Kurssi
- ratkaiseva
- CTO
- Nykyinen
- tiedot
- syvyys
- on kuvattu
- suunniteltu
- Laitteet
- ei
- dollaria
- Don
- Dont
- alas
- kukin
- reuna
- upotettu
- tarpeeksi
- ympäristö
- Vastaava
- erityisesti
- arvio
- arvioidaan
- Jopa
- lopullinen
- lopulta
- odottaa
- ulkoinen
- lisää
- päin
- Epäonnistui
- melko
- paljon
- varten
- alkaen
- koko
- Antaa
- tietty
- GPU
- käsi
- Käsittely
- käsissä
- Olla
- pää
- kuulokkeet
- auttanut
- tätä
- korkeampi
- Miten
- Kuitenkin
- HTTPS
- Sadat
- if
- tärkeä
- vaikuttava
- in
- vuorovaikutuksessa
- tulee
- IT
- SEN
- vain
- Tietää
- Sukunimi
- Viime vuonna
- Viive
- oppiminen
- jalkojen seuranta
- jalat
- pitää
- rajoitukset
- katso
- näköinen
- Matala
- kone
- koneoppiminen
- käsin
- monet
- ottelu
- Saattaa..
- me
- Meta
- metatutkimus
- meta vr
- malli
- liike
- Luonnollinen
- tarvitaan
- Uusi
- Nro
- ei mitään
- esineet
- of
- pois
- usein
- on
- ONE
- vain
- optimoitu
- or
- alkuperäinen
- Muut
- Muuta
- meidän
- oma
- Paperi
- paperit
- PC
- Ihmiset
- ihmisten
- suorituskyky
- ehkä
- puhelin
- Platon
- Platonin tietotieto
- PlatonData
- uskottava
- Asennon arvio
- sijainti
- asemoitu
- kantoja
- mahdollinen
- voimakas
- parempi
- esittää
- kohti
- todennäköisesti
- tuottaa
- asianmukaisesti
- toimittaa
- laittaa
- laatu
- etsintä
- tehtävä 2
- quest pro
- RE
- todellinen
- todellinen maailma
- reaaliaikainen
- suhteellisesti
- Vaatii
- tutkimus
- Tutkijat
- Saatu ja
- tulokset
- Huone
- ajaa
- juoksu
- s
- sama
- skannaus
- nähdä
- koska
- näytti
- anturit
- Istunto
- setti
- useat
- näyttää
- osoittivat
- SIGGRAPH
- Istuminen
- sosiaalinen
- sosiaalinen vr
- Ratkaisumme
- jonkin verran
- pian
- SteamVR
- Yhä
- Strategia
- niin
- esimies
- tuki
- järjestelmä
- järjestelmät
- vie
- että
- -
- heidän
- Niitä
- Siellä.
- Nämä
- ne
- tätä
- kolmella
- aika
- että
- tänään
- liian
- raita
- Trackers
- Seuranta
- siirtyminen
- kaksi
- asti
- Päivitykset
- päivitetty
- UploadVR
- käytetty
- käyttäjä
- käyttämällä
- hyvin
- kautta
- Video
- Virtual
- visio
- suullinen tentti
- vr
- VR-sovellukset
- VR-tutkimus
- we
- HYVIN
- olivat
- kun
- vaikka
- KUKA
- tulee
- with
- ilman
- Referenssit
- työskentely
- toimii
- maailman-
- olisi
- vuosi
- vuotta
- Voit
- Sinun
- youtube
- zephyrnet