Meta представляет Audio2PhotoReal для взаимодействий метавселенной

Meta представляет Audio2PhotoReal для взаимодействий метавселенной

Отметка времени: 8 января 2024 г., 8:50

Meta представила еще одну концепцию искусственного интеллекта в индустрии метавселенной. Согласно недавнему твиту Аллена Т., преподавателя и разработчика искусственного интеллекта, компания выпустила новую платформу под названием Audio2Photoreal.

Audio2Фотореалистичный представляет собой основу для создания полноценных фотореалистичных аватаров, которые естественным образом управляются жестами голоса автора. Эти аватары оживают благодаря речевому звуку, который интегрирован в жестовые движения людей.

На основе необработанной аудио речи отдельных лиц создается модель для генерации соответствующих фотореалистичных жестов. Система состоит из двух генеративных моделей, которые представляют коды выражения лица и позы тела аватара.

Согласно видеороликам, загруженным Алленом Т., это дополнение затрагивает различные части человека, включая рот, руки и лицо.

Некоторые из выпущенных демо представляют собой несколько сгенерированных образцов, два личных разговора, образец женских аватаров и направляющие позы, управляющие моделью распространения. Аллен Т. добавил, что метавселенная будет интересной благодаря этому развитию. В других местах технологическое сообщество, кажется, взволновано комментариями к посту. Пользователь @EverettWorld чирикнул, «Если Метавселенная выглядит так, то я в деле!»

Однако другой пользователь возмутился, что он больше не доверяет Мете. По данным @AIandDesign, Мета вредна для человека следил за всей историей Cambridge Analytica. Пользователь добавляет:

«Это все так круто. Я просто хочу, чтобы это была не Мета. Я им больше не доверяю. После всей истории с Cambridge Analytica я полностью покончил с Meta. Они вредны для человечества. Буквально. Я на ФБ, но только по семейным вопросам».

Технология, лежащая в основе концепции Audio2Photoreal

ArXiv, курируемая платформа для обмена исследованиями, открытая для ученых, чтобы они могли делиться исследованиями до того, как они будут рецензированы, дала больше информации о Audio2Фотореалистичный.

Движение тела аватара синтезируется с использованием модели диффузии, обусловленной звуком или текстом соответственно. Для движения лица на основе аудиовхода была построена модель диффузии, обусловленная звуком.

Однако тело и лицо следуют совершенно разной динамике: лицо сильно коррелирует с входным звуком, а тело имеет более слабую корреляцию с речью.

Meta Audio2Photoreal теперь позволяет создавать фотореалистичные аватары с голосовым управлением

Meta Audio2Photoreal теперь позволяет создавать фотореалистичные аватары с голосовым управлением

Важность Audio2Photoreal в метавселенной 

Участие Меты в Метавселенной направлено на то, чтобы сделать экосистему более реалистичной. Эти аватары Audio2Photoreal могут отражать выражение лица и жесты человека с помощью звука.

Это создает связь, подобную той, когда люди разговаривают лицом к лицу. У человека будут уникальные физические характеристики, такие как рост, цвет кожи и волос, форма тела и другие точные характеристики. Работая в Экосистема метавселенной становится более гибким, поскольку для него не требуются веб-камеры, видео или качественные камеры смартфонов.

Facebook, X и Instagram подали в суд на Огайо, чтобы отменить закон о социальных сетях

В другом недавнем проекте NetChoice, компания, представляющая такие платформы социальных сетей, как Facebook, Instagram и X, подала иск судебный процесс против нового закона Огайо о социальных сетях 5 января.

Компания опубликовала 34-страничный иск о блокировке Закона штата Огайо об уведомлении родителей в социальных сетях, который должен был вступить в силу 15 января, но только для учетных записей, созданных после указанной даты.

Закон о социальных сетях настаивает на том, что платформы должны получать согласие родителей для своих пользователей в возрасте до 16 лет. Однако в иске говорится, что закон «станет серьезным препятствием для возможности некоторых несовершеннолетних высказываться на этих сайтах».

Отметка времени:

Больше от МетаНьюс