A NEC ingyenes „FireDucks” szoftvert indít az adatelemzés felgyorsítására Python használatával

TOKYO, 19. október 2023. - (JCN Newswire) - NEC Corporation (TSE: 6701) ma bejelentette a „FireDucks”(1) elindítását, egy ingyenes szoftverprogramot, amely a „pandas” táblázatos adatelemző könyvtár felgyorsítására szolgál. Ma. Az adatelemzéshez szükséges adat-előkészítést akár 16-szor(2) gyorsabban képes elvégezni, mint a meglévő termékek, ez az új fejlesztésű szoftver jelentősen lerövidíti az adatelemzésre fordított időt és csökkenti a számítási költségeket.

A FireDucks béta verziója már ingyenesen elérhető online (https://fireducks-dev.github.io/).

Az elmúlt években minden eddiginél egyszerűbbé vált hatalmas mennyiségű adat gyűjtése, beleértve az értékesítési adatokat a POS-terminálokról, az e-kereskedelemről és a pénzügyi tranzakciókból származó adatokat. Annak érdekében, hogy az ilyen adatokból értékes analitikai eredményeket nyerjenek ki, egyre nagyobb szükség van arra, hogy az adattudósok mesterséges intelligencia (AI) és gépi tanulás (ML) segítségével elemezzék azokat.

Az adatelemzésre való felkészüléshez azonban először nagy adathalmazokat kell előfeldolgozni. Állítólag az adattudósok idejük hozzávetőleg 45%-át(3) töltik az adatok előkészítésével, és ez komoly problémává vált. Ezenkívül az adatmennyiség megugrása, valamint az AI és az ML fejlődése megnövekedett számítási bonyolultsághoz vezetett. Ennek eredményeként a magasabb számítási költségek (pl. felhőköltségek) és az ebből következő energiafogyasztás és CO2-kibocsátás növekedése is problémássá vált.

Ennek fényében a NEC elhatározta, hogy kifejleszti a FireDucks szoftvert, amely a pandák felgyorsítására szolgál. A szoftver fejlesztéséhez a NEC felhasználta azt a nagy teljesítményű programozási technológiát és gyorsítási know-how-t, amelyet a szuperszámítógépek fejlesztése terén szerzett több mint harminc éves tapasztalata során megszerzett.

Azzal, hogy a FireDucks béta verzióját ingyenesen elérhetővé teszi a nagyközönség számára, a NEC azt reméli, hogy az energiatakarékosság és a CO2-kibocsátás csökkentése révén hozzájárulhat az adatkutatók adatelemzési munkaidejének csökkentéséhez és a környezetvédelmi problémák megoldásához.

Jellemzők

1. Gyorsított teljesítmény A FireDucks akár 16-szor, átlagosan pedig körülbelül ötszörösére képes felgyorsítani a pandák felhasználásával létrehozott szoftverprogramokat(2). Ez körülbelül 30%-kal csökkenti az adatkutatók által az adatelemzéssel töltött teljes időt (4).

Az összes mag párhuzamos kihasználása és a számítások csökkentése az elsődleges oka ennek a gyorsulási szintnek. A FireDucks a többmagos CPU minden magját felhasználja nagy adatkészletek párhuzamos, hatékony feldolgozására. Ráadásul a folyamatok a programban meghatározott sorrendben és tartományban történő végrehajtása helyett a teljes folyamatból előzetesen azonosításra kerülnek az eredmények előállításához szükséges adatsorok, ami azt jelenti, hogy csak azokra az adatsorokra kell feldolgozást végezni. Ez viszont lehetővé teszi a feldolgozás felgyorsítását.

2. Magas kompatibilitás

A szoftver másik jellemzője a pandákkal való magas szintű kompatibilitása. Noha egyes könyvtárak gyorsabb feldolgozási sebességet tudnak elérni, mint a pandák, több lépést igényelnek, beleértve a program újraírását. A FireDucks viszont könnyen alkalmazható, mivel a programnak csak egy sorát kell átírni az elemzéshez és a kódoláshoz, akárcsak pandák használata esetén.

Jelenlegi eredmények

A következő eredményeket kaptuk, amikor a FireDucks-t a Toyota Technical Development Corporation(5) (TTDC) tényleges műveletei során használta.

• 60%-kal csökkenti az adatelemzésre fordított időt a házon belüli mesterséges intelligencia keretrendszerrel (Spicy MINT)
• 76%-kal csökken az elemző PC működési ideje

Az alábbi weboldalon megtekinthető egy interjú, amelyben a TTDC FireDucksot használó alkalmazottai a fejlesztőcsapat tagjaival beszélgettek, hogy visszajelzést adjanak az újonnan fejlesztett szoftverről. (URL: https://www.nec.com/en/global/rd/technologies/202312/index.html)

Jövőbeli tervek

A FireDucks bétaverziójának ingyenes biztosításával és az adatkutatók számára lehetővé téve annak tényleges használatát, a NEC azon dolgozik, hogy javítsa a funkcionalitását, miközben ellenőrzi hatékonyságát, azzal a céllal, hogy a 2024-es pénzügyi éven belül kereskedelmi forgalomba kerüljön.

(1) Ezt a szoftvert a japán New Energy and Industrial Technology Fejlesztési Szervezet (NEDO) támogatásával fejlesztették ki
(2) A TPCx-BB benchmarkon alapuló NEC vizsgálati eredmények szerint
(3) 2020 Az adattudomány állapota (https://shorturl.at/klyW1)
(4) Az NEC által belsőleg végzett számítások alapján
(5) A Toyota Technical Development Corporation-ről (TTDC): A termékfejlesztés optimális környezetének megteremtésére összpontosít a legmodernebb információk és technológia által vezérelt átfogó megoldások révén

A NEC Corporationről

A NEC Corporation vezető szerepet tölt be az informatikai és hálózati technológiák integrációjában, miközben népszerűsíti a „Bizonyosabb világ megszervezése” márkajelzést. A NEC lehetővé teszi a vállalkozások és közösségek számára, hogy alkalmazkodjanak a társadalomban és a piacon végbemenő gyors változásokhoz, mivel biztosítja a biztonság, a biztonság, a méltányosság és a hatékonyság társadalmi értékeit egy fenntarthatóbb világ előmozdítása érdekében, ahol mindenkinek lehetősége van a benne rejlő lehetőségek kiaknázására. További információért látogasson el a NEC weboldalára a következő címen: https://www.nec.com.

• SEO által támogatott tartalom és PR terjesztés. Erősödjön még ma.
• PlatoData.Network Vertical Generative Ai. Erősítse meg magát. Hozzáférés itt.
• PlatoAiStream. Web3 Intelligence. Felerősített tudás. Hozzáférés itt.
• PlatoESG. Carbon, CleanTech, Energia, Környezet, Nap, Hulladékgazdálkodás. Hozzáférés itt.
• PlatoHealth. Biotechnológiai és klinikai vizsgálatok intelligencia. Hozzáférés itt.
• Forrás: https://www.jcnnewswire.com/pressrelease/87137/3/