Genie AI Crafts Games do Google a partir de imagens únicas

Genie AI Crafts Games do Google a partir de imagens únicas

Carimbo de data / hora: 29 de fevereiro de 2024 11:00

O Google anunciou o Genie, um aplicativo para criação de jogos mobile, como parte de seu investimento contínuo em inteligência artificial. 

O modelo generativo de IA Genie, desenvolvido pela startup de IA do Google, DeepMind, demonstrou uma demonstração ao vivo. Genie aprende a mecânica do jogo com centenas de milhares de vídeos de jogo e pode gerar jogos jogáveis ​​com o mínimo de solicitações.

Leia também: Figure AI arrecadará US$ 675 milhões para robótica humanóide para solução de mão de obra

Revelando o Gênio

Conforme declarado no DeepMind oficial do Google no blog, Genie é um modelo mundial fundamental treinado por meio de vídeos online. “Uma variedade infinita de mundos jogáveis ​​(controláveis ​​pela ação) a partir de imagens sintéticas, fotografias e até esboços” pode ser produzida pelo modelo.

Genie, abreviação de Generative Interactive Environments, foi desenvolvido em parceria entre o Google e a Universidade da Colúmbia Britânica. Com apenas uma imagem, ele pode gerar plataformas 2D de rolagem lateral, como Contra e Super Mario Brothers, com base nas instruções do usuário.

No entanto, o Google DeepMind afirmou durante o anúncio que está introduzindo um “novo paradigma” para inteligência artificial generativa (IA) na forma de Genie. Além disso, a empresa reconheceu o surgimento de modelos generativos de IA capazes de gerar conteúdos novos e criativos através de linguagem, imagens e até vídeos.

De acordo com o Google, uma parte significativa das 200,000 horas de vídeos públicos não supervisionados de jogos na Internet nos quais Genie foi treinado são jogos de plataforma 2D, em vez de jogos completos de realidade virtual.

Especificações do Genie

Quando se trata de dimensões, o Genie tem 11 bilhões de parâmetros. Um tokenizador de vídeo espaço-temporal, um modelo de dinâmica autorregressiva e um modelo de ação latente simples e escalável também estão incluídos no modelo. Essas especificações permitem que o Genie atue em ambientes gerados quadro a quadro, mesmo sem rótulos ou outros requisitos específicos de domínio durante o treinamento.

Além disso, o Genie pode ser instruído a gerar um conjunto diversificado de ambientes interativos e controláveis, apesar de ser treinado apenas com dados de vídeo. O Genie pode criar ambientes jogáveis ​​com apenas um prompt de imagem, ao contrário de vários modelos generativos de IA que podem produzir conteúdo criativo com imagens de linguagem e até vídeos.

No entanto, o desenvolvedor do Google DeepMind, Tim Rocktäschel, disse no X (anteriormente Twitter) que eles se concentram na escala em vez de adicionar preconceitos indutivos.

Ele acrescentou que eles usam um conjunto de dados de mais de 200 mil horas de vídeos de plataformas 2D e treinam um modelo mundial de 11B. De forma não supervisionada, Genie aprende diversas ações latentes que controlam os personagens de forma consistente.

Genie AI Crafts Games do Google a partir de imagens únicas
Crédito da foto: Google

Capacidades do Gênio

De acordo com o Google Para pesquisadores, o Genie é movido por três modelos: um modelo dinâmico que prevê o que acontecerá no próximo quadro, um tokenizador de vídeo que transforma quadros de vídeo brutos em tokens discretos e um modelo de ação latente que pode inferir as ações entre os quadros de vídeo.

A capacidade do modelo fundamental do Genie de identificar o personagem principal de um jogo sem ser treinado em ações ou anotações de texto é um de seus recursos exclusivos. Graças aos modelos que o conduzem, o usuário pode controlar sem esforço o personagem de uma forma Gerado por IA ambiente de realidade virtual.

Rocktäschel também disse que o Genie poderia transformar outras mídias em jogos. Genie pode ser solicitado a criar vários mundos virtuais controláveis ​​​​pela ação a partir de várias entradas no artigo de pesquisa do Google DeepMind que o acompanha.

Além disso, Rocktäschel disse que o modelo pode converter qualquer imagem em um mundo 2D jogável. Segundo ele, o Genie pode dar vida a criações projetadas pelo homem, como esboços, por exemplo, belas obras de Sêneca e Cáspio, dois dos mais jovens criadores mundiais.

Carimbo de hora:

Mais de MetaNotícias