Αυτή η ανάρτηση συντάχθηκε από τους Ramdev Wudali και Kiran Mantripragada από την Thomson Reuters.
Σε 1992, Thomson Reuters (TR) κυκλοφόρησε την πρώτη της νομική υπηρεσία έρευνας τεχνητής νοημοσύνης, WIN (Westlaw Is Natural), μια καινοτομία εκείνη την εποχή, καθώς οι περισσότερες μηχανές αναζήτησης υποστήριζαν μόνο όρους και συνδέσμους Boolean. Έκτοτε, η TR έχει επιτύχει πολλά περισσότερα ορόσημα καθώς τα προϊόντα και οι υπηρεσίες τεχνητής νοημοσύνης της αυξάνονται συνεχώς σε αριθμό και ποικιλία, υποστηρίζοντας επαγγελματίες νομικούς, φορολογικούς, λογιστικούς, συμμόρφωσης και υπηρεσίες ειδήσεων σε όλο τον κόσμο, με δισεκατομμύρια πληροφορίες μηχανικής μάθησης (ML) που παράγονται κάθε χρόνο .
Με αυτήν την τεράστια αύξηση των υπηρεσιών τεχνητής νοημοσύνης, το επόμενο ορόσημο για την TR ήταν να εξορθολογίσει την καινοτομία και να διευκολύνει τη συνεργασία. Τυποποιήστε τη δημιουργία και την επαναχρησιμοποίηση λύσεων τεχνητής νοημοσύνης σε όλες τις επιχειρηματικές λειτουργίες και τα πρόσωπα των επαγγελματιών τεχνητής νοημοσύνης, διασφαλίζοντας παράλληλα τη συμμόρφωση με τις βέλτιστες πρακτικές της επιχείρησης:
- Αυτοματοποιήστε και τυποποιήστε την επαναλαμβανόμενη αδιαφοροποίητη προσπάθεια μηχανικής
- Διασφάλιση της απαιτούμενης απομόνωσης και ελέγχου των ευαίσθητων δεδομένων σύμφωνα με τα κοινά πρότυπα διακυβέρνησης
- Παρέχετε εύκολη πρόσβαση σε κλιμακωτούς υπολογιστικούς πόρους
Για να εκπληρώσει αυτές τις απαιτήσεις, η TR δημιούργησε την πλατφόρμα Enterprise AI γύρω από τους ακόλουθους πέντε πυλώνες: υπηρεσία δεδομένων, χώρο εργασίας πειραματισμού, κεντρικό μητρώο μοντέλων, υπηρεσία ανάπτυξης μοντέλων και παρακολούθηση μοντέλων.
Σε αυτήν την ανάρτηση, συζητάμε πώς η TR και η AWS συνεργάστηκαν για την ανάπτυξη της πρώτης Enterprise AI Platform της TR, ενός εργαλείου βασισμένου στον ιστό που θα παρείχε δυνατότητες που κυμαίνονται από πειραματισμό ML, εκπαίδευση, κεντρικό μητρώο μοντέλων, ανάπτυξη μοντέλου και παρακολούθηση μοντέλων. Όλες αυτές οι δυνατότητες έχουν κατασκευαστεί για να ανταποκρίνονται στα συνεχώς εξελισσόμενα πρότυπα ασφαλείας της TR και να παρέχουν απλές, ασφαλείς και συμβατές υπηρεσίες στους τελικούς χρήστες. Μοιραζόμαστε επίσης πώς το TR επέτρεψε την παρακολούθηση και τη διακυβέρνηση για μοντέλα ML που δημιουργήθηκαν σε διαφορετικές επιχειρηματικές μονάδες με ένα μόνο τζάμι.
Οι ΠΡΟΚΛΗΣΕΙΣ
Ιστορικά στο TR, το ML ήταν μια ικανότητα για ομάδες με προηγμένους επιστήμονες και μηχανικούς δεδομένων. Ομάδες με πόρους υψηλής εξειδίκευσης ήταν σε θέση να εφαρμόσουν πολύπλοκες διαδικασίες ML σύμφωνα με τις ανάγκες τους, αλλά γρήγορα έγιναν πολύ σιλό. Οι σιωπηρές προσεγγίσεις δεν παρείχαν καμία ορατότητα για την παροχή διακυβέρνησης σε εξαιρετικά κρίσιμες προβλέψεις λήψης αποφάσεων.
Οι επιχειρηματικές ομάδες TR έχουν τεράστιες γνώσεις στον τομέα. Ωστόσο, οι τεχνικές δεξιότητες και η μεγάλη προσπάθεια μηχανικής που απαιτούνται στο ML καθιστούν δύσκολη τη χρήση της βαθιάς τεχνογνωσίας τους για την επίλυση επιχειρηματικών προβλημάτων με τη δύναμη του ML. Η TR θέλει να εκδημοκρατίσει τις δεξιότητες, καθιστώντας τις προσβάσιμες σε περισσότερα άτομα εντός του οργανισμού.
Διαφορετικές ομάδες στο TR ακολουθούν τις δικές τους πρακτικές και μεθοδολογίες. Η TR θέλει να δημιουργήσει τις δυνατότητες που εκτείνονται σε όλο τον κύκλο ζωής της ML στους χρήστες της για να επιταχύνει την παράδοση έργων ML επιτρέποντας στις ομάδες να επικεντρωθούν στους επιχειρηματικούς στόχους και όχι στην επαναλαμβανόμενη αδιαφοροποίητη προσπάθεια μηχανικής.
Επιπλέον, οι κανονισμοί σχετικά με τα δεδομένα και την ηθική τεχνητή νοημοσύνη συνεχίζουν να εξελίσσονται, επιβάλλοντας κοινά πρότυπα διακυβέρνησης σε όλες τις λύσεις τεχνητής νοημοσύνης της TR.
Επισκόπηση λύσεων
Η πλατφόρμα Enterprise AI της TR είχε οραματιστεί να παρέχει απλές και τυποποιημένες υπηρεσίες σε διαφορετικά πρόσωπα, προσφέροντας δυνατότητες για κάθε στάδιο του κύκλου ζωής της ML. Η TR έχει εντοπίσει πέντε μεγάλες κατηγορίες που διαμορφώνουν όλες τις απαιτήσεις της TR:
- υπηρεσία δεδομένων – Για να επιτραπεί η εύκολη και ασφαλής πρόσβαση σε εταιρικά στοιχεία δεδομένων
- Χώρος εργασίας πειραματισμού – Να παρέχει δυνατότητες πειραματισμού και εκπαίδευσης μοντέλων ML
- Κεντρικό μητρώο μοντέλων – Ένας εταιρικός κατάλογος για μοντέλα κατασκευασμένα σε διαφορετικές επιχειρηματικές μονάδες
- Υπηρεσία ανάπτυξης μοντέλου – Παροχή διαφόρων επιλογών ανάπτυξης συμπερασμάτων σύμφωνα με τις πρακτικές CI/CD για επιχειρήσεις της TR
- Υπηρεσίες παρακολούθησης μοντέλων – Να παρέχει δυνατότητες παρακολούθησης δεδομένων και μοντελοποίησης μεροληψίας και παρασυρμάτων
Όπως φαίνεται στο παρακάτω διάγραμμα, αυτές οι μικροϋπηρεσίες έχουν κατασκευαστεί έχοντας υπόψη μερικές βασικές αρχές:
- Καταργήστε την αδιαφοροποίητη προσπάθεια μηχανικής από τους χρήστες
- Παρέχετε τις απαιτούμενες δυνατότητες με το πάτημα ενός κουμπιού
- Ασφαλίστε και διέπει όλες τις δυνατότητες σύμφωνα με τα εταιρικά πρότυπα της TR
- Φέρτε ένα μόνο τζάμι για δραστηριότητες ML
Οι μικροϋπηρεσίες της πλατφόρμας AI της TR είναι κατασκευασμένες με Amazon Sage Maker ως βασική μηχανή, στοιχεία χωρίς διακομιστή AWS για ροές εργασίας και υπηρεσίες AWS DevOps για πρακτικές CI/CD. SageMaker Στούντιο χρησιμοποιείται για πειραματισμό και εκπαίδευση και το μητρώο μοντέλων SageMaker χρησιμοποιείται για την καταχώρηση μοντέλων. Το κεντρικό μητρώο μοντέλων αποτελείται τόσο από το μητρώο μοντέλων του SageMaker όσο και από ένα Amazon DynamoDB πίνακα. Υπηρεσίες φιλοξενίας SageMaker χρησιμοποιούνται για την ανάπτυξη μοντέλων, ενώ Οθόνη SageMaker Model και SageMaker Διευκρίνιση χρησιμοποιούνται για την παρακολούθηση μοντέλων για μετατόπιση, μεροληψία, προσαρμοσμένες μετρικές αριθμομηχανές και επεξήγηση.
Οι ακόλουθες ενότητες περιγράφουν λεπτομερώς αυτές τις υπηρεσίες.
υπηρεσία δεδομένων
Ένας παραδοσιακός κύκλος ζωής έργου ML ξεκινά με την εύρεση δεδομένων. Γενικά, οι επιστήμονες δεδομένων ξοδεύουν το 60% ή περισσότερο του χρόνου τους για να βρουν τα σωστά δεδομένα όταν τα χρειάζονται. Ακριβώς όπως κάθε οργανισμός, η TR έχει πολλαπλούς χώρους αποθήκευσης δεδομένων που χρησιμεύουν ως ένα ενιαίο σημείο αλήθειας για διαφορετικούς τομείς δεδομένων. Η TR εντόπισε δύο βασικούς χώρους αποθήκευσης δεδομένων επιχειρήσεων που παρέχουν δεδομένα για τις περισσότερες περιπτώσεις χρήσης ML: έναν χώρο αποθήκευσης αντικειμένων και έναν χώρο αποθήκευσης σχεσιακών δεδομένων. Η TR δημιούργησε μια υπηρεσία δεδομένων πλατφόρμας AI για να παρέχει απρόσκοπτα πρόσβαση και στις δύο αποθήκες δεδομένων από τους πειραματικούς χώρους εργασίας των χρηστών και να αφαιρεί το φόρτο από τους χρήστες να πλοηγούνται σε περίπλοκες διαδικασίες για να αποκτούν δεδομένα από μόνοι τους. Η πλατφόρμα AI του TR ακολουθεί όλες τις συμμορφώσεις και τις βέλτιστες πρακτικές που ορίζονται από την ομάδα Data and Model Governance. Αυτό περιλαμβάνει μια υποχρεωτική Αξιολόγηση Επιπτώσεων Δεδομένων που βοηθά τους επαγγελματίες ML να κατανοήσουν και να ακολουθήσουν την ηθική και κατάλληλη χρήση των δεδομένων, με επίσημες διαδικασίες έγκρισης για να διασφαλιστεί η κατάλληλη πρόσβαση στα δεδομένα. Ο πυρήνας αυτής της υπηρεσίας, καθώς και όλων των υπηρεσιών πλατφόρμας, είναι η ασφάλεια και η συμμόρφωση σύμφωνα με τις βέλτιστες πρακτικές που καθορίζονται από την TR και τον κλάδο.
Απλή υπηρεσία αποθήκευσης Amazon Η αποθήκευση αντικειμένων (Amazon S3) λειτουργεί ως λίμνη δεδομένων περιεχομένου. Η TR δημιούργησε διαδικασίες για την ασφαλή πρόσβαση σε δεδομένα από τη λίμνη δεδομένων περιεχομένου στους χώρους εργασίας πειραματισμού των χρηστών, διατηρώντας παράλληλα την απαιτούμενη εξουσιοδότηση και δυνατότητα ελέγχου. Το Snowflake χρησιμοποιείται ως το εταιρικό σχεσιακό πρωτεύον κατάστημα δεδομένων. Κατόπιν αιτήματος του χρήστη και με βάση την έγκριση του κατόχου δεδομένων, η υπηρεσία δεδομένων Πλατφόρμας AI παρέχει ένα στιγμιότυπο των δεδομένων στον χρήστη που είναι άμεσα διαθέσιμο στον χώρο εργασίας του πειραματισμού.
Η πρόσβαση σε δεδομένα από διάφορες πηγές είναι ένα τεχνικό πρόβλημα που μπορεί εύκολα να επιλυθεί. Ωστόσο, η πολυπλοκότητα που έχει επιλύσει η TR είναι να δημιουργήσει ροές εργασιών έγκρισης που αυτοματοποιούν την αναγνώριση του κατόχου δεδομένων, την αποστολή αιτήματος πρόσβασης, τη διασφάλιση ότι ο κάτοχος των δεδομένων έχει ειδοποιηθεί ότι έχει ένα αίτημα πρόσβασης σε εκκρεμότητα και βάσει της κατάστασης έγκρισης να προβεί σε ενέργειες για την παροχή δεδομένων σε ο αιτών. Όλα τα συμβάντα σε όλη αυτή τη διαδικασία παρακολουθούνται και καταγράφονται για έλεγχο και συμμόρφωση.
Όπως φαίνεται στο παρακάτω διάγραμμα, το TR χρησιμοποιεί Λειτουργίες βημάτων AWS να ενορχηστρώσει τη ροή εργασίας και AWS Lambda για να εκτελέσετε τη λειτουργικότητα. Amazon API Gateway χρησιμοποιείται για την έκθεση της λειτουργικότητας με ένα τελικό σημείο API που πρέπει να καταναλωθεί από την πύλη ιστού τους.
Πειραματισμός και ανάπτυξη μοντέλων
Μια βασική ικανότητα για την τυποποίηση του κύκλου ζωής της ML είναι ένα περιβάλλον που επιτρέπει στους επιστήμονες δεδομένων να πειραματίζονται με διαφορετικά πλαίσια ML και μεγέθη δεδομένων. Η ενεργοποίηση ενός τέτοιου ασφαλούς, συμβατού περιβάλλοντος στο cloud μέσα σε λίγα λεπτά απαλλάσσει τους επιστήμονες δεδομένων από το βάρος του χειρισμού της υποδομής cloud, των απαιτήσεων δικτύωσης και των μέτρων προτύπων ασφαλείας, ώστε να επικεντρωθούν στο πρόβλημα της επιστήμης δεδομένων.
Το TR δημιουργεί έναν πειραματικό χώρο εργασίας που προσφέρει πρόσβαση σε υπηρεσίες όπως π.χ Κόλλα AWS, EMR Αμαζονίου, και το SageMaker Studio για να επιτρέψουν την επεξεργασία δεδομένων και τις δυνατότητες ML που τηρούν τα εταιρικά πρότυπα ασφάλειας cloud και την απαιτούμενη απομόνωση λογαριασμού για κάθε επιχειρηματική μονάδα. Η TR αντιμετώπισε τις ακόλουθες προκλήσεις κατά την εφαρμογή της λύσης:
- Η ενορχήστρωση από νωρίς δεν ήταν πλήρως αυτοματοποιημένη και περιλάμβανε πολλά χειροκίνητα βήματα. Ο εντοπισμός των προβλημάτων δεν ήταν εύκολος. Το TR ξεπέρασε αυτό το σφάλμα ενορχηστρώνοντας τις ροές εργασίας χρησιμοποιώντας τις συναρτήσεις βημάτων. Με τη χρήση των Λειτουργιών Βήματος, η δημιουργία πολύπλοκων ροών εργασίας, η διαχείριση καταστάσεων και ο χειρισμός σφαλμάτων έγινε πολύ πιο εύκολη.
- Μαγική Διαχείριση ταυτότητας και πρόσβασης AWS Ο ορισμός ρόλου (IAM) για τον χώρο εργασίας πειραματισμού ήταν δύσκολο να καθοριστεί. Για τη συμμόρφωση με τα πρότυπα εσωτερικής ασφάλειας και το μοντέλο ελάχιστων προνομίων της TR, αρχικά, ο ρόλος του χώρου εργασίας καθορίστηκε με ενσωματωμένες πολιτικές. Κατά συνέπεια, η ενσωματωμένη πολιτική μεγάλωσε με τον καιρό και έγινε περιεκτική, υπερβαίνοντας το όριο μεγέθους πολιτικής που επιτρέπεται για τον ρόλο του IAM. Για να μετριαστεί αυτό, η TR άλλαξε στη χρήση περισσότερων πολιτικών που διαχειρίζονται οι πελάτες και στην αναφορά τους στον ορισμό του ρόλου του χώρου εργασίας.
- Το TR περιστασιακά έφτασε τα προεπιλεγμένα όρια πόρων που ισχύουν σε επίπεδο λογαριασμού AWS. Αυτό προκάλεσε περιστασιακές αποτυχίες στην εκκίνηση εργασιών του SageMaker (για παράδειγμα, εργασίες εκπαίδευσης) λόγω του επιθυμητού ορίου τύπου πόρων. Η TR συνεργάστηκε στενά με την ομάδα εξυπηρέτησης του SageMaker για αυτό το ζήτημα. Αυτό το πρόβλημα επιλύθηκε αφού η ομάδα AWS παρουσίασε το SageMaker ως υποστηριζόμενη υπηρεσία Ποσοστώσεις υπηρεσιών τον Ιούνιο 2022.
Σήμερα, οι επιστήμονες δεδομένων στο TR μπορούν να ξεκινήσουν ένα έργο ML δημιουργώντας έναν ανεξάρτητο χώρο εργασίας και προσθέτοντας τα απαιτούμενα μέλη της ομάδας για συνεργασία. Η απεριόριστη κλίμακα που προσφέρει το SageMaker είναι στα χέρια τους παρέχοντάς τους προσαρμοσμένες εικόνες πυρήνα με διάφορα μεγέθη. Το SageMaker Studio έγινε γρήγορα ένα κρίσιμο συστατικό στην πλατφόρμα AI της TR και άλλαξε τη συμπεριφορά των χρηστών από τη χρήση περιορισμένων εφαρμογών για επιτραπέζιους υπολογιστές σε επεκτάσιμους και εφήμερους κινητήρες ειδικά σχεδιασμένους. Το παρακάτω διάγραμμα απεικονίζει αυτήν την αρχιτεκτονική.
Κεντρικό μητρώο μοντέλων
Το μητρώο μοντέλων παρέχει ένα κεντρικό αποθετήριο για όλα τα μοντέλα μηχανικής εκμάθησης της TR, επιτρέπει τη διαχείριση κινδύνου και υγείας αυτών με τυποποιημένο τρόπο σε όλες τις επιχειρηματικές λειτουργίες και εξορθολογίζει την επαναχρησιμοποίηση πιθανών μοντέλων. Επομένως, η υπηρεσία έπρεπε να κάνει τα εξής:
- Παρέχετε τη δυνατότητα εγγραφής τόσο νέων όσο και παλαιών μοντέλων, είτε έχουν αναπτυχθεί εντός είτε εκτός του SageMaker
- Εφαρμόστε ροές εργασιών διακυβέρνησης, δίνοντας τη δυνατότητα στους επιστήμονες δεδομένων, στους προγραμματιστές και στους ενδιαφερόμενους φορείς να προβάλλουν και να διαχειρίζονται συλλογικά τον κύκλο ζωής των μοντέλων
- Αυξήστε τη διαφάνεια και τη συνεργασία δημιουργώντας μια κεντρική προβολή όλων των μοντέλων σε όλο το TR παράλληλα με τα μεταδεδομένα και τις μετρήσεις υγείας
Η TR ξεκίνησε τη σχεδίαση μόνο με το μητρώο μοντέλων SageMaker, αλλά μία από τις βασικές απαιτήσεις της TR είναι να παρέχει τη δυνατότητα εγγραφής μοντέλων που δημιουργούνται εκτός του SageMaker. Η TR αξιολόγησε διαφορετικές σχεσιακές βάσεις δεδομένων, αλλά κατέληξε να επιλέξει το DynamoDB επειδή το σχήμα μεταδεδομένων για μοντέλα που προέρχονται από πηγές παλαιού τύπου θα είναι πολύ διαφορετικό. Η TR επίσης δεν ήθελε να επιβάλει καμία πρόσθετη εργασία στους χρήστες, γι' αυτό εφάρμοσαν έναν απρόσκοπτο αυτόματο συγχρονισμό μεταξύ των μητρώων του χώρου εργασίας του AI Platform SageMaker στο κεντρικό μητρώο SageMaker χρησιμοποιώντας Amazon EventBridge κανόνες και απαιτούμενους ρόλους IAM. Η TR ενίσχυσε το κεντρικό μητρώο με το DynamoDB για να επεκτείνει τις δυνατότητες εγγραφής μοντέλων παλαιού τύπου που δημιουργήθηκαν στους επιτραπέζιους υπολογιστές των χρηστών.
Το κεντρικό μητρώο μοντέλων της πλατφόρμας AI της TR είναι ενσωματωμένο στην πύλη της πλατφόρμας AI και παρέχει μια οπτική διεπαφή για αναζήτηση μοντέλων, ενημέρωση μεταδεδομένων μοντέλων και κατανόηση μετρήσεων βάσης μοντέλων και περιοδικών προσαρμοσμένων μετρήσεων παρακολούθησης. Το παρακάτω διάγραμμα απεικονίζει αυτήν την αρχιτεκτονική.
Ανάπτυξη μοντέλου
Η TR εντόπισε δύο βασικά μοτίβα για την αυτοματοποίηση της ανάπτυξης:
- Μοντέλα που αναπτύχθηκαν χρησιμοποιώντας το SageMaker μέσω του SageMaker ομαδικού μετασχηματισμού εργασιών για να ληφθούν συμπεράσματα σχετικά με ένα προτιμώμενο χρονοδιάγραμμα
- Μοντέλα που αναπτύχθηκαν εκτός του SageMaker σε τοπικούς επιτραπέζιους υπολογιστές χρησιμοποιώντας βιβλιοθήκες ανοιχτού κώδικα, μέσω της προσέγγισης του κοντέινερ με χρήση εργασιών επεξεργασίας του SageMaker για την εκτέλεση προσαρμοσμένου κώδικα συμπερασμάτων, ως έναν αποτελεσματικό τρόπο μετεγκατάστασης αυτών των μοντέλων χωρίς ανακατασκευή του κώδικα
Με την υπηρεσία ανάπτυξης πλατφόρμας AI, οι χρήστες TR (επιστήμονες δεδομένων και μηχανικοί ML) μπορούν να αναγνωρίσουν ένα μοντέλο από τον κατάλογο και να αναπτύξουν μια εργασία συμπερασμάτων στον επιλεγμένο λογαριασμό AWS, παρέχοντας τις απαιτούμενες παραμέτρους μέσω μιας ροής εργασίας που βασίζεται στο UI.
Η TR αυτοματοποίησε αυτήν την ανάπτυξη χρησιμοποιώντας υπηρεσίες AWS DevOps όπως Αγωγός κώδικα AWS και AWS CodeBuild. Το TR χρησιμοποιεί Λειτουργίες Βήματος για να ενορχηστρώσει τη ροή εργασιών ανάγνωσης και προεπεξεργασίας δεδομένων για τη δημιουργία εργασιών συμπερασμάτων του SageMaker. Το TR αναπτύσσει τα απαιτούμενα στοιχεία ως κώδικα χρησιμοποιώντας AWS CloudFormation πρότυπα. Το παρακάτω διάγραμμα απεικονίζει αυτήν την αρχιτεκτονική.
Παρακολούθηση μοντέλου
Ο κύκλος ζωής της ML δεν είναι πλήρης χωρίς τη δυνατότητα παρακολούθησης μοντέλων. Η ομάδα εταιρικής διακυβέρνησης της TR αναθέτει επίσης και ενθαρρύνει τις επιχειρηματικές ομάδες να παρακολουθούν την απόδοση του μοντέλου τους με την πάροδο του χρόνου για να αντιμετωπίσουν τυχόν ρυθμιστικές προκλήσεις. Το TR ξεκίνησε με μοντέλα παρακολούθησης και δεδομένα για drift. Η TR χρησιμοποίησε το SageMaker Model Monitor για να παρέχει μια βασική γραμμή δεδομένων και μια αληθή βάση συμπερασμάτων για να παρακολουθεί περιοδικά τον τρόπο με τον οποίο τα δεδομένα και τα συμπεράσματα του TR μετακινούνται. Μαζί με τις μετρήσεις παρακολούθησης μοντέλων SageMaker, η TR ενίσχυσε την ικανότητα παρακολούθησης αναπτύσσοντας προσαρμοσμένες μετρήσεις ειδικά για τα μοντέλα της. Αυτό θα βοηθήσει τους επιστήμονες δεδομένων της TR να καταλάβουν πότε πρέπει να επανεκπαιδεύσουν το μοντέλο τους.
Μαζί με την παρακολούθηση drift, η TR θέλει επίσης να κατανοήσει την προκατάληψη στα μοντέλα. Οι εξωγενείς δυνατότητες του SageMaker Clarify χρησιμοποιούνται για τη δημιουργία της υπηρεσίας μεροληψίας του TR. Το TR παρακολουθεί τόσο τα δεδομένα όσο και τα μοντέλα μεροληψίας και καθιστά αυτές τις μετρήσεις διαθέσιμες στους χρήστες τους μέσω της πύλης της πλατφόρμας AI.
Για να βοηθήσει όλες τις ομάδες να υιοθετήσουν αυτά τα εταιρικά πρότυπα, η TR έχει κάνει αυτές τις υπηρεσίες ανεξάρτητες και άμεσα διαθέσιμες μέσω της πύλης AI Platform. Οι επιχειρηματικές ομάδες της TR μπορούν να μπουν στην πύλη και να αναπτύξουν μια εργασία παρακολούθησης μοντέλου ή μια εργασία παρακολούθησης μεροληψίας μόνες τους και να τις εκτελέσουν σύμφωνα με το πρόγραμμα που προτιμούν. Ενημερώνονται για την κατάσταση της εργασίας και τις μετρήσεις για κάθε εκτέλεση.
Η TR χρησιμοποίησε υπηρεσίες AWS για ανάπτυξη CI/CD, ενορχήστρωση ροής εργασίας, πλαίσια χωρίς διακομιστή και τερματικά σημεία API για τη δημιουργία μικροϋπηρεσιών που μπορούν να ενεργοποιηθούν ανεξάρτητα, όπως φαίνεται στην ακόλουθη αρχιτεκτονική.
Αποτελέσματα και μελλοντικές βελτιώσεις
Η πλατφόρμα AI της TR κυκλοφόρησε το τρίτο τρίμηνο του 3 με και τα πέντε κύρια στοιχεία: υπηρεσία δεδομένων, χώρο εργασίας πειραματισμού, κεντρικό μητρώο μοντέλων, ανάπτυξη μοντέλου και παρακολούθηση μοντέλων. Η TR πραγματοποίησε εσωτερικές εκπαιδευτικές συνεδρίες για τις επιχειρηματικές της μονάδες για να ενσωματωθούν στην πλατφόρμα και τους πρόσφερε αυτοκαθοδηγούμενα εκπαιδευτικά βίντεο.
Η πλατφόρμα AI έχει παράσχει δυνατότητες στις ομάδες του TR που δεν υπήρχαν ποτέ πριν. έχει ανοίξει ένα ευρύ φάσμα δυνατοτήτων για την ομάδα επιχειρησιακής διακυβέρνησης της TR να βελτιώσει τα πρότυπα συμμόρφωσης και να κεντράρει το μητρώο, παρέχοντας μια ενιαία προβολή γυαλιού σε όλα τα μοντέλα ML εντός του TR.
Η TR αναγνωρίζει ότι κανένα προϊόν δεν είναι στα καλύτερά του κατά την αρχική κυκλοφορία. Όλα τα εξαρτήματα του TR βρίσκονται σε διαφορετικά επίπεδα ωριμότητας και η ομάδα Enterprise AI Platform της TR βρίσκεται σε φάση συνεχούς βελτίωσης για επαναληπτική βελτίωση των χαρακτηριστικών του προϊόντος. Η τρέχουσα σειρά προόδου της TR περιλαμβάνει την προσθήκη πρόσθετων επιλογών συμπερασμάτων του SageMaker, όπως τελικά σημεία σε πραγματικό χρόνο, ασύγχρονα και πολλαπλά μοντέλα. Η TR σχεδιάζει επίσης να προσθέσει την επεξήγηση μοντέλου ως χαρακτηριστικό στην υπηρεσία παρακολούθησης μοντέλων της. Η TR σχεδιάζει να χρησιμοποιήσει τις δυνατότητες επεξήγησης του SageMaker Clarify για να αναπτύξει την εσωτερική της υπηρεσία επεξήγησης.
Συμπέρασμα
Η TR μπορεί τώρα να επεξεργάζεται τεράστιες ποσότητες δεδομένων με ασφάλεια και να χρησιμοποιεί προηγμένες δυνατότητες AWS για να μεταφέρει ένα έργο ML από την ιδέα στην παραγωγή σε διάστημα εβδομάδων, σε σύγκριση με τους μήνες που χρειάστηκε πριν. Με τις out-of-the-box δυνατότητες των υπηρεσιών AWS, οι ομάδες εντός της TR μπορούν να καταχωρούν και να παρακολουθούν μοντέλα ML για πρώτη φορά, επιτυγχάνοντας συμμόρφωση με τα εξελισσόμενα πρότυπα διακυβέρνησης μοντέλων τους. Η TR ενδυνάμωσε τους επιστήμονες δεδομένων και τις ομάδες προϊόντων να απελευθερώσουν αποτελεσματικά τη δημιουργικότητά τους για την επίλυση των πιο περίπλοκων προβλημάτων.
Για να μάθετε περισσότερα σχετικά με την πλατφόρμα Enterprise AI της TR στο AWS, ρίξτε μια ματιά στο Συνεδρία AWS re:Invent 2022. Εάν θέλετε να μάθετε πώς το TR επιτάχυνε τη χρήση της μηχανικής εκμάθησης χρησιμοποιώντας το Εργαστήριο δεδομένων AWS πρόγραμμα, ανατρέξτε στο μελέτη περίπτωσης.
Σχετικά με τους Συγγραφείς
Ramdev Wudali είναι Αρχιτέκτονας δεδομένων, βοηθώντας τον αρχιτέκτονα και τη δημιουργία της πλατφόρμας AI/ML για να δώσει τη δυνατότητα σε επιστήμονες και ερευνητές δεδομένων να αναπτύξουν λύσεις μηχανικής μάθησης εστιάζοντας στην επιστήμη των δεδομένων και όχι στις ανάγκες υποδομής. Στον ελεύθερο χρόνο του, λατρεύει να διπλώνει χαρτί για να δημιουργεί στολίδια origami και να φορά ασεβή μπλουζάκια.
Kiran Mantripragada είναι ο Ανώτερος Διευθυντής της Πλατφόρμας AI στην Thomson Reuters. Η ομάδα της πλατφόρμας AI είναι υπεύθυνη για την ενεργοποίηση εφαρμογών λογισμικού τεχνητής νοημοσύνης για την παραγωγή και τη διευκόλυνση της εργασίας επιστημόνων δεδομένων και ερευνητών μηχανικής μάθησης. Με πάθος για την επιστήμη, την τεχνητή νοημοσύνη και τη μηχανική, στον Kiran αρέσει να γεφυρώνει το χάσμα μεταξύ έρευνας και παραγωγής για να φέρει την πραγματική καινοτομία της τεχνητής νοημοσύνης στους τελικούς καταναλωτές.
Bhavana Chirumamilla είναι Sr. Resident Architect στο AWS. Είναι παθιασμένη με τα δεδομένα και τις λειτουργίες ML και φέρνει πολύ ενθουσιασμό για να βοηθήσει τις επιχειρήσεις να δημιουργήσουν στρατηγικές δεδομένων και ML. Στον ελεύθερο χρόνο της, απολαμβάνει χρόνο με την οικογένειά της ταξιδεύοντας, πεζοπορία, κηπουρική και παρακολουθώντας ντοκιμαντέρ.
Σρινιβάσα Σάικ είναι αρχιτέκτονας λύσεων στην AWS με έδρα τη Βοστώνη. Βοηθά τους εταιρικούς πελάτες να επιταχύνουν το ταξίδι τους στο cloud. Είναι παθιασμένος με τα κοντέινερ και τις τεχνολογίες μηχανικής μάθησης. Στον ελεύθερο χρόνο του, του αρέσει να περνά χρόνο με την οικογένειά του, να μαγειρεύει και να ταξιδεύει.
Κινγκγουέι Λι είναι ειδικός μηχανικής μάθησης στο Amazon Web Services. Έλαβε το διδακτορικό του στην Έρευνα Επιχειρήσεων αφού έσπασε τον λογαριασμό επιχορήγησης έρευνας του συμβούλου του και απέτυχε να παραδώσει το βραβείο Νόμπελ που υποσχέθηκε. Προς το παρόν, βοηθά τους πελάτες του κλάδου των χρηματοοικονομικών υπηρεσιών και των ασφαλιστικών εταιρειών να δημιουργήσουν λύσεις μηχανικής μάθησης στο AWS. Στον ελεύθερο χρόνο του, του αρέσει να διαβάζει και να διδάσκει.
- SEO Powered Content & PR Distribution. Ενισχύστε σήμερα.
- Platoblockchain. Web3 Metaverse Intelligence. Ενισχύθηκε η γνώση. Πρόσβαση εδώ.
- πηγή: https://aws.amazon.com/blogs/machine-learning/how-thomson-reuters-built-an-ai-platform-using-amazon-sagemaker-to-accelerate-delivery-of-ml-projects/
- 100
- 2022
- 7
- a
- Ικανός
- Σχετικα
- επιταχύνουν
- επιτάχυνση
- πρόσβαση
- προσιτός
- Σύμφωνα με
- Λογαριασμός
- Λογιστήριο
- επιτευχθεί
- την επίτευξη
- αποκτούν
- απέναντι
- Ενέργειες
- πράξεις
- Πρόσθετος
- διεύθυνση
- ενστερνίζομαι
- προηγμένες
- Μετά το
- AI
- Πλατφόρμα AI
- Υπηρεσίες AI
- AI / ML
- Όλα
- επιτρέπει
- κατά μήκος της πλευράς
- Amazon
- Amazon Sage Maker
- Amazon υπηρεσίες Web
- Ποσά
- και
- api
- εφαρμογές
- εφαρμοσμένος
- πλησιάζω
- προσεγγίσεις
- έγκριση
- αρχιτεκτονική
- γύρω
- εξουσιοδότηση
- αυτοματοποίηση
- Αυτοματοποιημένη
- Αυτόματο
- διαθέσιμος
- AWS
- βασίζονται
- Baseline
- επειδή
- πριν
- είναι
- ΚΑΛΎΤΕΡΟΣ
- βέλτιστες πρακτικές
- μεταξύ
- προκατάληψη
- δισεκατομμύρια
- boston
- ΓΕΦΥΡΑ
- φέρω
- Φέρνει
- έσπασε
- χτίζω
- Κτίριο
- Χτίζει
- χτισμένο
- βάρος
- επιχείρηση
- επιχειρηματικές λειτουργίες
- δυνατότητες
- περιπτώσεις
- κατάλογος
- κατηγορίες
- προκαλούνται
- κεντρικός
- κεντρική
- προκλήσεις
- έλεγχος
- επιλέγοντας
- επιλέγονται
- στενά
- Backup
- cloud infrastructure
- Ασφάλεια Cloud
- κωδικός
- συνεργάζομαι
- συνεργάστηκαν
- συνεργασία
- συλλογικά
- ερχομός
- Κοινός
- σύγκριση
- πλήρης
- συγκρότημα
- περίπλοκο
- Συμμόρφωση
- υποχωρητικός
- συστατικό
- εξαρτήματα
- Αποτελείται
- χρήση υπολογιστή
- καταναλώνεται
- Καταναλωτές
- Δοχείο
- Εμπορευματοκιβώτια
- περιεχόμενο
- ΣΥΝΕΧΕΙΑ
- συνεχής
- έλεγχος
- πυρήνας
- δημιουργία
- δημιουργήθηκε
- δημιουργία
- δημιουργικότητα
- κρίσιμης
- κρίσιμος
- Ρεύμα
- Τη στιγμή
- έθιμο
- Πελάτες
- ημερομηνία
- Λίμνη δεδομένων
- επεξεργασία δεδομένων
- επιστημονικά δεδομένα
- βάσεις δεδομένων
- Λήψη Αποφάσεων
- βαθύς
- βαθιά τεχνογνωσία
- Προεπιλογή
- παραδώσει
- διανομή
- εκδημοκρατίζω
- παρατάσσω
- ανάπτυξη
- αναπτύσσεται
- περιγράφουν
- Υπηρεσίες
- επιφάνεια εργασίας
- λεπτομέρεια
- αποφασισμένος
- ανάπτυξη
- αναπτύχθηκε
- προγραμματιστές
- ανάπτυξη
- Ανάπτυξη
- διαφορετικές
- δύσκολος
- Διευθυντής
- συζητήσουν
- ντοκιμαντέρ
- τομέα
- domains
- κάτω
- Νωρίς
- ευκολότερη
- εύκολα
- αποτελεσματικά
- αποτελεσματικός
- προσπάθεια
- την εξουσία
- ενεργοποιήσετε
- ενεργοποιημένη
- δίνει τη δυνατότητα
- ενεργοποίηση
- Ενθαρρύνει
- Τελικό σημείο
- Κινητήρας
- Μηχανική
- Μηχανικοί
- Κινητήρες
- ενισχυμένη
- εξασφαλίζω
- εξασφαλίζοντας
- Εταιρεία
- επιχειρήσεις
- ενθουσιασμός
- Περιβάλλον
- σφάλμα
- ουσιώδης
- ηθικά
- αξιολόγηση
- εκδηλώσεις
- ΠΑΝΤΑ
- εξελίσσονται
- εξελίσσεται
- παράδειγμα
- πείραμα
- εξειδίκευση
- επεκτείνουν
- εξαιρετικά
- διευκολύνω
- Απέτυχε
- οικογένεια
- Χαρακτηριστικό
- Χαρακτηριστικά
- λίγοι
- τελικός
- οικονομικός
- χρηματοπιστωτικές υπηρεσίες
- Εύρεση
- εύρεση
- Όνομα
- πρώτη φορά
- Συγκέντρωση
- εστιάζοντας
- ακολουθήστε
- Εξής
- εξής
- επίσημος
- πλαισίων
- από
- Εκπληρώ
- πλήρως
- λειτουργικότητα
- λειτουργίες
- μελλοντικός
- χάσμα
- General
- παράγεται
- παίρνω
- ποτήρι
- Go
- Στόχοι
- διακυβέρνησης
- χορηγεί
- Έδαφος
- Μεγαλώνοντας
- Χειρισμός
- Σκληρά
- Υγεία
- βοήθεια
- βοήθεια
- βοηθά
- υψηλά
- φιλοξενία
- Πως
- Ωστόσο
- HTML
- HTTPS
- προσδιορίζονται
- προσδιορίσει
- προσδιορισμό
- Ταυτότητα
- εικόνες
- Επίπτωση
- εφαρμογή
- εφαρμοστεί
- εκτελεστικών
- επιβάλλω
- βελτίωση
- in
- περιλαμβάνει
- Αυξάνουν
- ανεξάρτητος
- ανεξάρτητα
- βιομηχανία
- Υποδομή
- αρχικός
- Καινοτομία
- ιδέες
- αντί
- ασφάλιση
- ενσωματωθεί
- περιβάλλον λειτουργίας
- εσωτερικός
- συμμετέχουν
- απομόνωση
- ζήτημα
- IT
- Δουλειά
- Θέσεις εργασίας
- ταξίδι
- Κλειδί
- Ξέρω
- γνώση
- λίμνη
- ξεκινήσει
- ξεκίνησε
- δρομολόγηση
- ΜΑΘΑΊΝΩ
- μάθηση
- Κληροδότημα
- Νομικά
- Επίπεδο
- επίπεδα
- βιβλιοθήκες
- LIMIT
- όρια
- ζω
- τοπικός
- μηχανή
- μάθηση μηχανής
- που
- μεγάλες
- ΚΑΝΕΙ
- Κατασκευή
- διαχείριση
- διαχείριση
- διαχείριση
- εντολές
- τρόπος
- Ταχύτητες
- πολοί
- ωριμότητα
- μέτρα
- Μέλη
- Μεταδεδομένα
- μεθοδολογίες
- μετρικός
- Metrics
- μικροεπιχειρήσεις
- μεταναστεύσουν
- ορόσημο
- Ορόσημα
- νου
- Λεπτ.
- Μετριάζω
- ML
- μοντέλο
- μοντέλα
- Παρακολούθηση
- παρακολούθηση
- οθόνες
- μήνες
- περισσότερο
- πλέον
- πολλαπλούς
- Φυσικό
- Πλοηγηθείτε
- Ανάγκη
- ανάγκες
- δικτύωσης
- Νέα
- νέα
- επόμενη
- βραβείο Νόμπελ
- αριθμός
- αντικείμενο
- τυχαίος
- προσφέρονται
- προσφορά
- προσφορές
- Onboard
- ONE
- ανοικτού κώδικα
- άνοιξε
- λειτουργίες
- Επιλογές
- ενορχήστρωση
- επιχειρήσεις
- αρχικά
- εκτός
- δική
- ιδιοκτήτης
- παράθυρο
- Χαρτί
- παράμετροι
- πάθος
- παθιασμένος
- πρότυπα
- People
- επίδοση
- περιοδικός
- φάση
- αγωγού
- σχεδιασμό
- φώναξε
- πλατφόρμες
- Πλάτων
- Πληροφορία δεδομένων Plato
- Πλάτωνα δεδομένα
- Σημείο
- Πολιτικές
- πολιτική
- Πύλη
- δυνατότητες
- Θέση
- δυναμικού
- δύναμη
- πρακτικές
- Προβλέψεις
- προτιμάται
- πρωταρχικός
- αρχές
- βραβείο
- Πρόβλημα
- προβλήματα
- διαδικασια μας
- Διεργασίες
- μεταποίηση
- Προϊόν
- παραγωγή
- Προϊόντα
- επαγγελματίες
- Πρόγραμμα
- σχέδιο
- έργα
- υποσχόμενος
- παρέχουν
- παρέχεται
- παρέχει
- χορήγηση
- Q3
- q3 2022
- γρήγορα
- σειρά
- κυμαίνεται
- RE
- φθάσει
- Ανάγνωση
- πραγματικός
- σε πραγματικό χρόνο
- έλαβε
- κάντε ΕΓΓΡΑΦΗ
- μητρώου
- κανονισμοί
- ρυθμιστές
- απελευθερώνουν
- κυκλοφόρησε
- αφαιρέστε
- Αποθήκη
- ζητήσει
- απαιτείται
- απαιτήσεις
- έρευνα
- ερευνητές
- πόρος
- Υποστηρικτικό υλικό
- υπεύθυνος
- Reuters
- Κίνδυνος
- Ρόλος
- ρόλους
- κανόνες
- τρέξιμο
- σοφός
- Συμπεράσματα SageMaker
- επεκτάσιμη
- Κλίμακα
- πρόγραμμα
- Επιστήμη
- επιστήμονες
- αδιάλειπτη
- άψογα
- Αναζήτηση
- Οι μηχανές αναζήτησης
- τμήματα
- προστατευμένο περιβάλλον
- Ασφαλής
- ασφαλώς
- ασφάλεια
- αποστολή
- αρχαιότερος
- ευαίσθητος
- εξυπηρετούν
- Χωρίς διακομιστή
- υπηρεσία
- Υπηρεσίες
- συνεδρίες
- διάφοροι
- Κοινοποίηση
- παρουσιάζεται
- Απλούς
- αφού
- ενιαίας
- Μέγεθος
- μεγέθη
- έμπειρος
- δεξιότητες
- Στιγμιότυπο
- So
- λογισμικό
- λύση
- Λύσεις
- SOLVE
- Πηγές
- ειδικός
- συγκεκριμένες
- δαπανήσει
- Δαπάνες
- Στάδιο
- ενδιαφερόμενα μέρη
- τυποποίηση
- πρότυπα
- ξεκίνησε
- ξεκινά
- Μελών
- Κατάσταση
- Βήμα
- Βήματα
- χώρος στο δίσκο
- κατάστημα
- καταστήματα
- στρατηγικές
- εξορθολογισμό
- στούντιο
- τέτοιος
- υποστηριζόνται!
- Στήριξη
- ενεργοποιημένη
- συγχρονισμός
- τραπέζι
- Πάρτε
- φόρος
- Διδασκαλία
- ομάδες
- Τεχνικός
- τεχνικές δεξιότητες
- Τεχνολογίες
- πρότυπα
- όροι
- Η
- τους
- επομένως
- Thomson Reuters
- Μέσω
- παντού
- ώρα
- προς την
- εργαλείο
- Παρακολούθηση
- παραδοσιακός
- Τρένο
- Εκπαίδευση
- Μεταμορφώστε
- Διαφάνεια
- Ταξίδια
- καταπληκτικός
- ενεργοποιήθηκε
- καταλαβαίνω
- μονάδα
- μονάδες
- απολύω
- απεριόριστες
- Ενημέρωση
- χρήση
- Χρήστες
- Χρήστες
- ποικιλία
- διάφορα
- Σταθερή
- μέσω
- Βίντεο
- Δες
- ορατότητα
- παρακολουθείτε
- ιστός
- διαδικτυακές υπηρεσίες
- Web-based
- Εβδ.
- αν
- ενώ
- ευρύς
- Ευρύ φάσμα
- θα
- νίκη
- εντός
- χωρίς
- Εργασία
- εργάστηκαν
- ροές εργασίας
- παγκόσμιος
- θα
- έτος
- Σας
- zephyrnet