Szöveg-3D modellt indító Luma 43 millió dollárt gyűjtött a legutóbbi körben

Szöveg-3D modellt indító Luma 43 millió dollárt gyűjtött a legutóbbi körben

Időbélyeg: 10. január 2024. 3:24

A Luma, egy generatív mesterségesintelligencia-építő szoftver, amely a szöveges leírásokat megfelelő 3D-s modellekké alakítja, éppen 43 millió dollárt (34 millió GBP) gyűjtött össze egy Andreesen Horowitz, az Nvidia és mások által vezetett B sorozatú finanszírozási körben. 

A 2021-ben Amit Jain vezérigazgató, az Apple számítógépes látásmódjával foglalkozó korábbi rendszermérnök és Alex Yu műszaki igazgató, a Berkeley-i Kaliforniai Egyetem végzős hallgatója által XNUMX-ben alapított Luma AI olyan gépi tanulási szoftvereket fejleszt, amelyek egy lépéssel túlmutatnak azon, amit mi. a legtöbb létező generatív neurális hálózatból.

A digitális művészet lapos bittérképeit kibocsátó szöveg-kép modellekkel ellentétben a Luma mesterséges intelligencia segítségével fényképekből, videókból vagy szöveges leírásokból háromdimenziós objektummodellt hoz létre, amelyek letölthetők, módosíthatók, szerkeszthetők és szükség szerint renderelhetők.

A kaliforniai Palo Altóban működő feltörekvő ezt a technológiát Genie nevű alkalmazásként már elindította – interneten keresztül, Luma iOS-alkalmazásként és Discord-on keresztül –, amely képes képeket és videókat 3D-s jelenetekké alakítani, vagy 3D-t készíteni. a felhasználó által leírt objektumok modelljei. Ezek a géppel készített modellek megtekinthetők a képernyőn, és exportálhatók olyan művészeti csomagokba, mint a Blender, olyan népszerű játékmotorokba, mint az Unreal vagy a Unity, és más eszközökbe további felhasználás céljából. 

Képernyőkép Luma dzsinnjéről, amely egy csésze kávét tartó keselyűt alkot

Képernyőkép Genie azon kísérletéről, hogy keselyűt hozzon létre, aki egy csésze kávét tart nekünk… Ez az egyszerű felszólításból jött létre: keselyű egy csésze kávéval. kattints a kinagyításhoz

„Úgy gondoljuk, hogy a multimodalitás kritikus fontosságú az intelligencia szempontjából” – állítják a feltörekvő alapítói lerohan közleményben, amelyben hétfőn ismertették legutóbbi finanszírozási körüket. „A nyelvi modelleken túlmutató, tudatosabb, képességesebb és hasznosabb rendszerek felépítéséhez a következő lépés a funkcióváltás a jövőképből következik. Ezért a multimodális alapmodellek képzésén és bővítésén dolgozunk olyan rendszerek számára, amelyek képesek látni és megérteni, megmutatni és megmagyarázni, és végül kölcsönhatásba lépnek a világunkkal, hogy változást idézzenek elő.

A Luma azt állítja, hogy különféle szabadalmaztatott számítógépes látási technikákat használ, a képszegmentálástól a hálózásig, hogy ezeket a 3D modelleket felvételekből és leírásokból állítsa elő. A modelleket végül felhasználhatják videojátékokban, virtuális valóság-alkalmazásokban, szimulációkban vagy robotikai tesztelésekben.

Egyesek hasznosnak találhatják ezt a technológiát, ha valami 3D-s grafikával vagy 3D-s jelenettel kapcsolatos ötletük van, és nincs tehetségük vagy készségük a szükséges modellek elkészítéséhez. Mostantól megkérhetik a Lumát, hogy hozza létre ezeket az eszközöket, és importálja azokat bármilyen szoftvercsomagba vagy motorba.

A feltörekvő technológiája felhasználható prototípusok készítésére vagy 3D-s rendszerek tesztelésére, mielőtt egy képzettebb emberi művészt bevonnának jobb modellek készítésére – különben a Genie teljesítménye elég jó lehet az adott produkcióhoz.

Eljátszadoztunk a rendszerrel, és azt találtuk, hogy Genie végeredménye nagyon aranyosnak tűnik, de lehet, hogy nem mindenkinek való ebben a szakaszban; a feltörekvő által adott példák jobban néztek ki, mint amit ki tudtunk találni, talán azért, mert az induló fizetős API-ján keresztül készültek, miközben mi az ingyenes verziót használtuk.

Ez fizetett felület egy dollárba kerül egy modell vagy jelenet elkészítése a szállított eszközökből. A biz még arra is rámutat, hogy ez olcsóbb és gyorsabb, mint egy emberi tervezőre hagyatkozni. Ha ki tudod húzni Genie-t, akkor most nincs miért aggódnod.

A Luma korábban 20 millió dollárt gyűjtött egy sorozat-A körben, amelyet az Amplify Partners, az Nventures (az Nvidia befektetési csoportja) és a General Catalyst vezetett. További befektetők között szerepelt a Matrix Partners, a South Park Commons és a Remote First Capital. Miután eddig összesen több mint 70 millió dollárt gyűjtött össze, van értékelése becsült 200 és 300 millió dollár között. ®

Időbélyeg:

Még több A regisztráció