Opstart af tekst-til-3D-modeller Luma hæver $43 mio. i den seneste runde

Opstart af tekst-til-3D-modeller Luma hæver $43 mio. i den seneste runde

Tidsstempel: 10. januar 2024 kl. 3

Luma, en generativ AI-startup-byggesoftware, der transformerer tekstbeskrivelser til tilsvarende 3D-modeller, har netop rejst $43 millioner (£34 millioner) i en serie-B-finansieringsrunde ledet af Andreesen Horowitz, Nvidia og andre. 

Grundlagt i 2021 af CEO Amit Jain, en tidligere systemingeniør, der arbejder med computervision hos Apple, og CTO Alex Yu, en kandidatstuderende fra University of California, Berkeley, udvikler Luma AI maskinlæringssoftware, der går et skridt ud over, hvad vi har set fra de fleste eksisterende generative neurale netværk.

I modsætning til tekst-til-billede-modeller, der udsender flade bitmaps af digital kunst, bruger Luma AI til at skabe tredimensionelle modeller af objekter ud fra fotos, videoer eller tekstbeskrivelser, der kan downloades, manipuleres, redigeres og gengives efter behov.

Opkomlingen med base i Palo Alto, Californien, har allerede lanceret denne teknologi som en app kaldet Genie – tilgængelig via nettet, som Luma iOS-appen og via Discord – som er i stand til at konvertere billeder og video til 3D-scener eller producere 3D modeller af brugerbeskrevne objekter. Disse maskinfremstillede modeller kan forhåndsvises på skærmen og eksporteres til kunstpakker som Blender, populære spilmotorer som Unreal eller Unity og andre værktøjer til videre brug. 

Skærmbillede af Luma's Genie, der skaber en grib, der holder en kop kaffe

Skærmbillede af Genies forsøg på at skabe en grib, der holder en kop kaffe for os ... Dette blev genereret ud fra den simple prompt: en grib med en kop kaffe. Klik for at forstørre

"Vi mener, at multimodalitet er afgørende for intelligens," opkomlingens grundlæggere flød i en erklæring, der annoncerer deres seneste finansieringsrunde mandag. "For at gå ud over sprogmodeller og bygge mere bevidste, dygtige og nyttige systemer, vil det næste skridt funktionsændring komme fra vision. Så vi arbejder på at træne og opskalere multimodale fundamentmodeller for systemer, der kan se og forstå, vise og forklare og til sidst interagere med vores verden for at skabe forandring."

Luma siger, at det bruger forskellige proprietære computervisionsteknikker, fra billedsegmentering til meshing, til at generere disse 3D-modeller fra optagelser og beskrivelser. Modellerne kan meget vel ende med at blive brugt i videospil, virtual reality-applikationer, simuleringer eller robottests.

Nogle mennesker kan finde denne teknologi temmelig nyttig, hvis de har en idé til noget, der involverer 3D-grafik eller en 3D-scene, og mangler kunstnerens talent eller dygtighed til at skabe de nødvendige modeller. Nu kan de bede Luma om at generere disse aktiver og importere dem til den softwarepakke eller motor, de har til rådighed.

Opkomlingens teknologi kan bruges til at lave prototyper eller teste 3D-systemer, før en mere dygtig menneskelig kunstner bliver hentet ind for at skabe bedre modeller – eller Genies output kan være godt nok til netop din produktion.

Vi legede med systemet og fandt ud af, at Genies output så lidt sødt ud, men det er måske ikke for alle på dette tidspunkt; eksemplerne givet af opkomlingen så bedre ud, end hvad vi kunne finde på, måske fordi de blev produceret via opstartens betalte API, mens vi brugte freebie-versionen.

Det er betalt grænseflade koster en dollar en pop at konstruere en model eller scene ud fra de leverede aktiver. Den biz gør endda pointen, at dette er billigere og hurtigere end at stole på en menneskelig designer. Hvis du kan udligne Genie, har du ikke noget at bekymre dig om lige nu.

Luma rejste tidligere $20 millioner i en serie-A-runde ledet af Amplify Partners, Nventures (Nvidias investeringsarm) og General Catalyst. Andre investorer omfattede Matrix Partners, South Park Commons og Remote First Capital. Efter at have rejst i alt over 70 millioner dollars indtil videre, har den en værdiansættelse anslået mellem $200 millioner og $300 millioner. ®

Tidsstempel:

Mere fra Registret