Η NEC λανσάρει δωρεάν λογισμικό «FireDucks» για την επιτάχυνση της ανάλυσης δεδομένων χρησιμοποιώντας Python

ΤΟΚΙΟ, 19 Οκτωβρίου 2023 – (JCN Newswire) – NEC Corporation (TSE: 6701) ανακοίνωσε σήμερα την κυκλοφορία του «FireDucks»(1), ενός προγράμματος ελεύθερου λογισμικού που έχει σχεδιαστεί για να επιταχύνει τη βιβλιοθήκη ανάλυσης δεδομένων πίνακα «pandas», η οποία χρησιμοποιείται για ανάλυση με την Python—την πιο ευρέως χρησιμοποιούμενη γλώσσα προγραμματισμού στον κόσμο σήμερα. Με δυνατότητα εκτέλεσης της προετοιμασίας δεδομένων που απαιτείται για την ανάλυση δεδομένων έως και 16 φορές(2) γρηγορότερα από τα υπάρχοντα προϊόντα, αυτό το πρόσφατα αναπτυγμένο λογισμικό μειώνει σημαντικά τον χρόνο που αφιερώνεται στην ανάλυση δεδομένων και μειώνει το κόστος υπολογισμού.

Η beta έκδοση του FireDucks είναι τώρα διαθέσιμη δωρεάν στο διαδίκτυο (https://fireducks-dev.github.io/).

Τα τελευταία χρόνια, έχει γίνει ευκολότερο από ποτέ η συλλογή τεράστιων ποσοτήτων δεδομένων, συμπεριλαμβανομένων δεδομένων πωλήσεων από τερματικά σημεία πώλησης (POS), ηλεκτρονικού εμπορίου και δεδομένων από χρηματοοικονομικές συναλλαγές. Προκειμένου να εξαχθούν πολύτιμα αναλυτικά αποτελέσματα από τέτοια δεδομένα, υπάρχει αυξανόμενη ανάγκη για επιστήμονες δεδομένων να τα αναλύσουν χρησιμοποιώντας τεχνητή νοημοσύνη (AI) και μηχανική μάθηση (ML).

Ωστόσο, για να προετοιμαστούν για την ανάλυση δεδομένων, πρέπει πρώτα να υποβληθούν σε προεπεξεργασία μεγάλα σύνολα δεδομένων. Οι επιστήμονες δεδομένων λέγεται ότι ξοδεύουν περίπου το 45%(3) του χρόνου τους για την προετοιμασία των δεδομένων και αυτό έχει γίνει μείζον ζήτημα. Επιπλέον, η αύξηση του όγκου δεδομένων και η εξέλιξη του AI και του ML έχουν οδηγήσει σε αυξημένη υπολογιστική πολυπλοκότητα. Ως αποτέλεσμα, το υψηλότερο υπολογιστικό κόστος (π.

Ενόψει αυτού, η NEC ξεκίνησε να αναπτύξει το FireDucks, ένα πρόγραμμα λογισμικού που έχει σχεδιαστεί για να επιταχύνει τα πάντα. Για την ανάπτυξη αυτού του λογισμικού, η NEC αξιοποίησε την τεχνολογία προγραμματισμού υψηλής απόδοσης και την τεχνογνωσία επιτάχυνσης που έχει καλλιεργήσει στα τριάντα και πλέον χρόνια εμπειρίας της στην ανάπτυξη υπερυπολογιστών.

Διαθέτοντας δωρεάν την έκδοση beta του FireDucks στο ευρύ κοινό, η NEC ελπίζει να συμβάλει στη μείωση των ωρών εργασίας για τους επιστήμονες δεδομένων για την ανάλυση δεδομένων και την επίλυση περιβαλλοντικών ζητημάτων μέσω της διατήρησης της ενέργειας και της μείωσης των εκπομπών CO2.

Χαρακτηριστικά

1. Accelerated performanceFireDucks είναι ικανό να επιταχύνει προγράμματα λογισμικού που δημιουργούνται από panda έως και 16 φορές και κατά μέσο όρο κατά περίπου πέντε φορές(2). Αυτό μειώνει τον συνολικό χρόνο που αφιερώνουν οι επιστήμονες δεδομένων για την ανάλυση δεδομένων κατά περίπου 30%(4).

Η παράλληλη χρήση όλων των πυρήνων και η μείωση του υπολογισμού είναι οι κύριοι λόγοι για αυτό το επίπεδο επιτάχυνσης. Το FireDucks χρησιμοποιεί κάθε πυρήνα μιας CPU πολλαπλών πυρήνων για την αποτελεσματική επεξεργασία μεγάλων συνόλων δεδομένων παράλληλα. Επιπλέον, αντί να εκτελούνται διαδικασίες με την ίδια σειρά και εύρος που καθορίζονται στο πρόγραμμα, τα σύνολα δεδομένων που είναι απαραίτητα για την παραγωγή των αποτελεσμάτων προσδιορίζονται εκ των προτέρων από τη συνολική διαδικασία, πράγμα που σημαίνει ότι η επεξεργασία πρέπει να εκτελείται μόνο για αυτά τα σύνολα δεδομένων. Αυτό με τη σειρά του καθιστά δυνατή την επιτάχυνση της επεξεργασίας.

2. Υψηλή συμβατότητα

Ένα άλλο χαρακτηριστικό αυτού του λογισμικού είναι η υψηλή συμβατότητά του με τα πάντα. Ενώ ορισμένες βιβλιοθήκες είναι σε θέση να επιτύχουν μεγαλύτερες ταχύτητες επεξεργασίας από τα πάντα, απαιτούν πολλά βήματα, συμπεριλαμβανομένης της επανεγγραφής του προγράμματος. Το FireDucks, από την άλλη πλευρά, μπορεί να εφαρμοστεί εύκολα, επειδή μόνο μία γραμμή του προγράμματος πρέπει να ξαναγραφτεί για να εκτελεστεί ανάλυση και κωδικοποίηση όπως ακριβώς θα κάνατε αν χρησιμοποιούσατε panda.

Πραγματικά αποτελέσματα

Τα ακόλουθα αποτελέσματα προέκυψαν όταν το FireDucks χρησιμοποιήθηκε σε πραγματικές λειτουργίες από την Toyota Technical Development Corporation(5) (TTDC).

• 60% μείωση του χρόνου που δαπανάται για την ανάλυση δεδομένων χρησιμοποιώντας ένα εσωτερικό πλαίσιο AI (Spicy MINT)
• Μείωση 76% στον χρόνο λειτουργίας του Η/Υ ανάλυσης

Μια συνέντευξη στην οποία οι υπάλληλοι του TTDC που έχουν χρησιμοποιήσει το FireDucks μίλησαν με μέλη της ομάδας ανάπτυξης για να δώσουν σχόλια σχετικά με το πρόσφατα αναπτυγμένο λογισμικό, μπορείτε να δείτε στον παρακάτω ιστότοπο. (URL: https://www.nec.com/en/global/rd/technologies/202312/index.html)

Μελλοντικά σχέδια

Παρέχοντας δωρεάν την έκδοση beta του FireDucks και δίνοντας τη δυνατότητα στους επιστήμονες δεδομένων να το χρησιμοποιήσουν πραγματικά, η NEC θα εργαστεί για να βελτιώσει τη λειτουργικότητά του και ταυτόχρονα να επαληθεύσει την αποτελεσματικότητά του, με στόχο την εμπορευματοποίησή του εντός του FY2024.

(1) Αυτό το λογισμικό αναπτύχθηκε με την υποστήριξη του Οργανισμού Ανάπτυξης Νέας Ενέργειας και Βιομηχανικής Τεχνολογίας (NEDO) στην Ιαπωνία
(2)Σύμφωνα με τα αποτελέσματα δοκιμών NEC με βάση το σημείο αναφοράς TPCx-BB
(3) 2020 State of Data Science (https://shorturl.at/klyW1)
(4)Με ​​βάση τους υπολογισμούς που έγιναν εσωτερικά από τη NEC
(5) Σχετικά με την Toyota Technical Development Corporation (TTDC): Επικεντρώθηκε στη δημιουργία βέλτιστων περιβαλλόντων για την ανάπτυξη προϊόντων μέσω ολοκληρωμένων λύσεων που βασίζονται σε πληροφορίες και τεχνολογία αιχμής

Σχετικά με την NEC Corporation

Η NEC Corporation έχει καθιερωθεί ως ηγέτης στην ολοκλήρωση των τεχνολογιών πληροφορικής και δικτύων, προωθώντας ταυτόχρονα τη δήλωση επωνυμίας «Οργάνωση ενός φωτεινότερου κόσμου». Το NEC δίνει τη δυνατότητα στις επιχειρήσεις και τις κοινότητες να προσαρμοστούν στις ταχείες αλλαγές που συμβαίνουν τόσο στην κοινωνία όσο και στην αγορά, καθώς προβλέπει τις κοινωνικές αξίες της ασφάλειας, της ασφάλειας, της δικαιοσύνης και της αποτελεσματικότητας για την προώθηση ενός πιο βιώσιμου κόσμου όπου όλοι έχουν την ευκαιρία να αξιοποιήσουν πλήρως τις δυνατότητές τους. Για περισσότερες πληροφορίες, επισκεφθείτε το NEC στη διεύθυνση https://www.nec.com.

• SEO Powered Content & PR Distribution. Ενισχύστε σήμερα.
• PlatoData.Network Vertical Generative Ai. Ενδυναμώστε τον εαυτό σας. Πρόσβαση εδώ.
• PlatoAiStream. Web3 Intelligence. Ενισχύθηκε η γνώση. Πρόσβαση εδώ.
• PlatoESG. Ανθρακας, Cleantech, Ενέργεια, Περιβάλλον, Ηλιακός, Διαχείριση των αποβλήτων. Πρόσβαση εδώ.
• PlatoHealth. Ευφυΐα βιοτεχνολογίας και κλινικών δοκιμών. Πρόσβαση εδώ.
• πηγή: https://www.jcnnewswire.com/pressrelease/87137/3/