Meta predstavlja Audio2PhotoReal za interakcije Metaverse

Meta predstavlja Audio2PhotoReal za interakcije Metaverse

Časovni žig: 8. januar 2024 8

Meta je uvedla še en koncept AI v industrijo metaverse. Glede na nedavni tvit Allena T., učitelja in razvijalca umetne inteligence, je podjetje izdalo nov okvir, imenovan Audio2Photoreal.

Audio2Photoreal je ogrodje za ustvarjanje polnih fotorealističnih avatarjev, ki jih naravno poganja avtorjev glas. Ti avatarji oživijo z zvokom govora, ki je integriran v gestualno gibanje ljudi.

Glede na neobdelani zvočni govor posameznikov se ustvari model za ustvarjanje ustreznih fotorealističnih potez. Sistem je sestavljen iz dveh generativnih modelov, ki predstavljata izrazne kode in položaj telesa avatarja.

Glede na posnetke, ki jih je naložil Allen T, ta dodatek vpliva na različne dele posameznika, vključno z usti, rokami in obrazom.

Nekateri objavljeni predstavitve so ustvarjeni številni vzorci, dva osebna pogovora, ustvarjen vzorec ženskih avatarjev in poze vodnikov, ki poganjajo model difuzije. Allen T. je dodal, da bo metaverse s tem razvojem zabaven. Drugod se zdi, da je tehnološka skupnost navdušena nad komentarji na objavo. Uporabnik @EverettWorld tweeted, "Če je Metaverse videti tako, sem zraven!"

Vendar pa je drug uporabnik vznemiril, da Meti ne zaupa več veliko. Glede na @AIandDesign, Meta je škodljiva za ljudi spremlja celotno stvar Cambridge Analytica. Uporabnik dodaja,

»Vse to je tako kul. Samo želim si, da to ne bi bila Meta. Ne zaupam jim več veliko. Po vsej stvari s Cambridge Analytico sem popolnoma končal z Meto. So škodljivi za človeštvo. dobesedno. Sem na FB, vendar samo za družinske stvari.

Tehnologija za konceptom Audio2Photoreal

ArXiv, kurirana platforma za izmenjavo raziskav, ki je odprta za znanstvenike, da izmenjujejo raziskave, preden so bile strokovno pregledane, je dalo več vpogledov v Audio2Photoreal.

Gibanje telesa avatarja je sintetizirano z uporabo difuzijskega modela, pogojenega z zvokom oziroma besedilom. Za gibanje obraza je bil iz zvočnega vhoda izdelan zvočno pogojen difuzijski model.

Vendar pa telo in obraz sledita zelo različni dinamiki, kjer je obraz močno povezan z vhodnim zvokom, medtem ko ima telo šibkejšo korelacijo z govorom.

Metin Audio2Photoreal zdaj omogoča glasovne fotorealistične avatarje

Metin Audio2Photoreal zdaj omogoča glasovne fotorealistične avatarje

Pomen Audio2Photoreal v metaverzumu 

Cilj Metine vpletenosti v Metaverse je narediti ekosistem bolj realističen. Ti Audio2Photoreal avatarji lahko z uporabo zvoka odražajo obrazno mimiko in telesne kretnje posameznika.

Ustvari se povezava, podobna tistemu, ko se posamezniki pogovarjajo iz oči v oči. Oseba bo imela edinstvene fizične lastnosti, kot so višina, barva kože in las, oblika telesa in druge natančne lastnosti. Delo v Metaverzni ekosistem postane bolj prilagodljiv, saj ne potrebuje spletnih kamer, video posnetkov ali kakovostnih kamer pametnih telefonov.

Facebook, X in Instagram tožijo Ohio, da bi ukinili zakon o socialnih medijih

V drugem nedavnem razvoju je podjetje NetChoice, ki zastopa platforme družbenih medijev, kot so Facebook, Instagram in X, vložilo Tožbo proti novemu zakonu o družbenih medijih v Ohiu 5. januarja.

Podjetje je objavilo 34-stransko tožbo za blokiranje zakona o obveščanju staršev o družbenih omrežjih v Ohiju, ki bi začel veljati 15. januarja, vendar le za račune, ustvarjene po omenjenem datumu.

Zakon o družbenih medijih vztraja, da morajo platforme pridobiti soglasje staršev za svoje uporabnike, stare 16 let ali manj. Vendar tožba navaja, da bi zakon "postavil znatno oviro za zmožnost nekaterih mladoletnikov, da sodelujejo v govoru na teh spletnih mestih."

Časovni žig:

Več od MetaNovice