Oppstart av tekst-til-3D-modeller Luma samler inn $43 millioner i siste runde

Oppstart av tekst-til-3D-modeller Luma samler inn $43 millioner i siste runde

Tidsstempel: 10. januar 2024 3:24

Luma, en generativ AI-oppstartsprogramvare som forvandler tekstbeskrivelser til tilsvarende 3D-modeller, samlet inn 43 millioner dollar (34 millioner pund) i en serie-B-finansieringsrunde ledet av Andreesen Horowitz, Nvidia og andre. 

Luma AI ble grunnlagt i 2021 av administrerende direktør Amit Jain, en tidligere systemingeniør som jobber med datasyn hos Apple, og CTO Alex Yu, en doktorgradsstudent fra University of California, Berkeley, og utvikler maskinlæringsprogramvare som går et skritt utover det vi. har sett fra de fleste eksisterende generative nevrale nettverk.

I motsetning til tekst-til-bilde-modeller som sender ut flate punktgrafikk av digital kunst, bruker Luma AI til å lage tredimensjonale modeller av objekter fra bilder, videoer eller tekstbeskrivelser som kan lastes ned, manipuleres, redigeres og gjengis etter behov.

Oppkomlingen, basert i Palo Alto, California, har allerede lansert denne teknologien som en app kalt Genie – tilgjengelig via nettet, som Luma iOS-appen og via Discord – som er i stand til å konvertere bilder og video til 3D-scener eller produsere 3D modeller av brukerbeskrevne objekter. Disse maskinlagde modellene kan forhåndsvises på skjermen og eksporteres til kunstpakker som Blender, populære spillmotorer som Unreal eller Unity og andre verktøy for videre bruk. 

Skjermbilde av Luma's Genie som lager en gribb som holder en kopp kaffe

Skjermbilde av Genies forsøk på å lage en gribb som holder en kopp kaffe for oss ... Dette ble generert fra den enkle oppfordringen: en gribb med en kopp kaffe. Klikk for å forstørre

"Vi tror at multimodalitet er avgjørende for intelligens," oppkomlingens grunnleggere rant i en uttalelse som kunngjorde deres siste finansieringsrunde på mandag. "For å gå utover språkmodeller og bygge mer bevisste, dyktige og nyttige systemer, vil neste trinn funksjonsendring komme fra visjon. Så vi jobber med å trene og skalere opp multimodale grunnmodeller for systemer som kan se og forstå, vise og forklare, og til slutt samhandle med vår verden for å få til endring.»

Luma sier at den bruker forskjellige proprietære datasynsteknikker, fra bildesegmentering til meshing, for å generere disse 3D-modellene fra opptak og beskrivelser. Modellene kan godt ende opp med å bli brukt i videospill, virtual reality-applikasjoner, simuleringer eller robottesting.

Noen mennesker kan finne denne teknologien ganske nyttig hvis de har en idé om noe som involverer 3D-grafikk eller en 3D-scene, og mangler artisttalentet eller ferdighetene til å lage de nødvendige modellene. Nå kan de be Luma om å generere disse eiendelene og importere dem til hvilken som helst programvarepakke eller motor de har til rådighet.

Oppkomlingens teknologi kan brukes til prototyping eller testing av 3D-systemer før en mer dyktig menneskelig kunstner blir hentet inn for å lage bedre modeller – eller Genies produksjon kan være god nok for akkurat din produksjon.

Vi lekte med systemet og fant ut at Genies utgang så ganske søt ut, men er kanskje ikke for alle på dette stadiet; eksemplene gitt av oppkomlingen så bedre ut enn det vi kunne komme på, kanskje fordi de ble produsert via oppstartens betalte API mens vi brukte gratisversjonen.

Det er betalt for grensesnitt koster en dollar en pop å konstruere en modell eller scene fra leverte eiendeler. The biz gjør til og med poenget at dette er billigere og raskere enn å stole på en menneskelig designer. Hvis du kan out-draw Genie, har du ikke noe å bekymre deg for akkurat nå.

Luma har tidligere samlet inn 20 millioner dollar i en serie-A-runde ledet av Amplify Partners, Nventures (Nvidias investeringsarm) og General Catalyst. Andre investorer inkluderte Matrix Partners, South Park Commons og Remote First Capital. Etter å ha samlet inn over 70 millioner dollar så langt, har den en verdivurdering anslått mellom $200 millioner og $300 millioner. ®

Tidstempel:

Mer fra Registeret