La startup de modelos de texto a 3D, Luma, recauda 43 millones de dólares en su última ronda

La startup de modelos de texto a 3D, Luma, recauda 43 millones de dólares en su última ronda

Marca de tiempo: 10 de enero de 2024 3:24 a. M.

Luma, un software de creación de startups de IA generativa que transforma descripciones de texto en modelos 3D correspondientes, acaba de recaudar 43 millones de dólares (34 millones de libras esterlinas) en una ronda de financiación de serie B liderada por Andreesen Horowitz, Nvidia y otros. 

Fundada en 2021 por el director ejecutivo Amit Jain, un ex ingeniero de sistemas que trabaja en visión por computadora en Apple, y el director de tecnología Alex Yu, un estudiante graduado de la Universidad de California, Berkeley, Luma AI desarrolla software de aprendizaje automático que va un paso más allá de lo que conocemos. Hemos visto en la mayoría de las redes neuronales generativas existentes.

A diferencia de los modelos de conversión de texto a imagen que emiten mapas de bits planos de arte digital, Luma utiliza IA para crear a partir de fotografías, vídeos o descripciones de texto modelos tridimensionales de objetos que se pueden descargar, manipular, editar y renderizar según sea necesario.

La startup, con sede en Palo Alto, California, ya ha lanzado esta tecnología como una aplicación llamada Genie -disponible en la web, como aplicación Luma para iOS y a través de Discord-, que es capaz de convertir imágenes y vídeos en escenas 3D o producir imágenes 3D. modelos de objetos descritos por el usuario. Estos modelos hechos a máquina se pueden obtener una vista previa en la pantalla y exportarse a paquetes artísticos como Blender, motores de juegos populares como Unreal o Unity y otras herramientas para su uso posterior. 

Captura de pantalla del genio de Luma creando un buitre sosteniendo una taza de café

Captura de pantalla del intento de Genie de crear un buitre sosteniendo una taza de café para nosotros... Esto se generó a partir de un simple mensaje: un buitre con una taza de café. Click para agrandar

"Creemos que la multimodalidad es fundamental para la inteligencia", los fundadores de la empresa advenediza efusivo en un comunicado anunciando su última ronda de financiación el lunes. “Para ir más allá de los modelos de lenguaje y construir sistemas más conscientes, capaces y útiles, el siguiente paso en el cambio de funciones vendrá de la visión. Por lo tanto, estamos trabajando en la capacitación y ampliación de modelos básicos multimodales para sistemas que puedan ver y comprender, mostrar y explicar y, eventualmente, interactuar con nuestro mundo para efectuar cambios”.

Luma dice que utiliza varias técnicas patentadas de visión por computadora, desde segmentación de imágenes hasta mallado, para generar estos modelos 3D a partir de imágenes y descripciones. Los modelos bien podrían acabar utilizándose en videojuegos, aplicaciones de realidad virtual, simulaciones o pruebas de robótica.

Algunas personas pueden encontrar esta tecnología bastante útil si tienen una idea para algo que involucre gráficos 3D o una escena 3D, y carecen del talento artístico o la habilidad para crear los modelos necesarios. Ahora pueden pedirle a Luma que genere esos activos y los importe a cualquier paquete de software o motor que tengan a mano.

La tecnología del advenedizo podría usarse para crear prototipos o probar sistemas 3D antes de que se contrate a un artista humano más capacitado para crear mejores modelos, o la producción de Genie puede ser lo suficientemente buena para su producción particular.

Jugamos con el sistema y descubrimos que la producción de Genie parecía bastante linda, pero puede que no sea para todos en esta etapa; Los ejemplos dados por el advenedizo parecían mejores de lo que se nos ocurrieron, tal vez porque fueron producidos a través de la API paga de la startup mientras usábamos la versión gratuita.

Eso pagado interfaz. Cuesta un dólar cada uno construir un modelo o escena a partir de los recursos suministrados. El negocio incluso señala que esto es más barato y más rápido que depender de un diseñador humano. Si puedes superar a Genie, no tienes nada de qué preocuparte en este momento.

Luma anteriormente recaudó 20 millones de dólares en una ronda de serie A liderada por Amplify Partners, Nventures (el brazo de inversión de Nvidia) y General Catalyst. Otros inversores fueron Matrix Partners, South Park Commons y Remote First Capital. Después de recaudar un total de más de 70 millones de dólares hasta ahora, tiene una valoración estimado entre 200 y 300 millones de dólares. ®

Sello de tiempo:

Mas de El registro