Amazon SageMaker kliendid saavad vaadata ja hallata oma kvoodipiiranguid Teenuse kvoodid. Lisaks saavad nad vaadata peaaegu reaalajas kasutusmõõdikuid ja luua Amazon CloudWatch meetrika SageMakeri kvootide vaatamiseks ja programmiliseks päringu tegemiseks.
SageMaker aitab teil hõlpsasti masinõppe (ML) mudeleid luua, koolitada ja juurutada. Lisateabe saamiseks vaadake Amazon SageMakeriga alustamine. Teenuse kvoodid lihtsustavad piirangute haldamist, võimaldades teil vaadata ja hallata oma SageMakeri kvoote kesksest asukohast.
Teenuse kvootide abil saate vaadata oma AWS-i kontol või AWS-i piirkonnas olevate ressursside, toimingute või üksuste maksimaalset arvu. Teenuse kvoote saate kasutada ka kohandatavate kvootide suurendamise taotlemiseks.
Seoses MLOps-i tavade suureneva kasutamisega ja seega nõudlusega ML-mudelite katsetamiseks ja ümberõppeks mõeldud ressursside järele, peab rohkem kliente käitama mitut eksemplari, sageli sama eksemplari tüüpi korraga.
Paljud andmeteaduse meeskonnad töötavad sageli paralleelselt, kasutades samaaegseks töötlemiseks, treenimiseks ja häälestamiseks mitut eksemplari. Varem jõudsid kasutajad mõnikord mõne konkreetse eksemplaritüübi jaoks reguleeritava konto limiidini ja pidid AWS-ilt käsitsi limiidi suurendamist taotlema.
Kvoodi taotlemiseks suureneb käsitsi alates Teenuse kvootide kasutajaliides, saate valida loendist kvoodi ja valida Taotle kvoodi suurendamist. Lisateabe saamiseks vaadake Kvoodi suurendamise taotlemine.
Selles postituses näitame, kuidas saate uute funktsioonide abil automaatselt taotleda limiidi suurendamist, kui esinemisjuhtude kõrge tase on saavutatud.
Lahenduse ülevaade
Järgnev diagramm illustreerib lahenduse arhitektuuri.
See arhitektuur sisaldab järgmist töövoogu:
- CloudWatchi mõõdik jälgib ressursi kasutamist. CloudWatchi alarm käivitub, kui ressursikasutus ületab teatud eelkonfigureeritud läve.
- Sõnum saadetakse aadressile Amazoni lihtne teavitusteenus (Amazon SNS).
- Sõnumi võtab vastu an AWS Lambda funktsiooni.
- Lambda funktsioon taotleb kvoodi suurendamist.
Lisaks konkreetse konto kvoodi suurendamise taotlemisele saab Lambda funktsioon lisada ka kvoodi suurendamise organisatsiooni mall (kuni 10 kvooti). Nii on igal konkreetsel AWS-i organisatsioonil loodud uuel kontol vaikimisi kvooditaotlused suurenenud.
Eeldused
Täitke järgmised eeltingimusetapid:
- Seadistage AWS-i konto ja luua an AWS-i identiteedi- ja juurdepääsuhaldus (IAM) kasutaja. Juhiste saamiseks vaadake Kaitske oma AWS-i kontot.
- Paigaldage AWS SAM CLI.
Juurutage AWS-i serverita rakendusmudeli abil
Rakenduse juurutamiseks kasutades GitHub repo, käivitage terminalis järgmine käsk:
Pärast lahenduse juurutamist peaks CloudWatchi konsoolil olema uus häire. See alarm jälgib SageMakeri sülearvuti eksemplaride kasutamist eksemplari ml.t3.medium jaoks.
Kui teie ressursikasutus jõuab üle 50%, käivitub alarm ja lambda funktsioon nõuab suurendamist.
Kui teie konto on osa AWS-i organisatsioonist ja teil on kvooditaotluse mall lubatud, peaksite nägema ka mallil neid suurenemisi, kui mallil on vabad pesad. Nii on ka selle organisatsiooni uutel kontodel suurendamine konfigureeritud loomisel.
Juurutage CloudWatchi konsooli abil
Rakenduse juurutamiseks CloudWatchi konsooli abil toimige järgmiselt.
- Valige CloudWatchi konsoolil Kõik alarmid navigeerimispaanil.
- Vali Loo äratus.
- Vali Valige mõõdik.
- Vali Kasutus.
- Valige mõõdik, mida soovite jälgida.
- Valige tingimus, millal soovite alarmi käivituda.
Rohkem võimalikke konfiguratsioone alarmi seadistamisel vt Looge staatilisel lävel põhinev CloudWatchi äratus.
- Seadistage SNS-i teema, et saada häirest teavitus.
Samuti saate kasutada Amazon SNS-i lambda funktsiooni käivitamiseks, kui häire käivitub. Vaata AWS Lambda kasutamine koos Amazon SNS-iga rohkem informatsiooni.
- eest Häire nimi, sisestage nimi.
- Vali järgmine.
- Vali Loo äratus.
Koristage
Selle postituse osana loodud ressursside puhastamiseks kustutage kindlasti kõik loodud virnad. Selleks käivitage järgmine käsk:
Järeldus
Selles postituses näitasime, kuidas saate kasutada SageMakeri uut integratsiooni teenusekvootidega, et automatiseerida SageMakeri ressursside kvoodi suurendamise taotlusi. Nii saavad andmeteaduse meeskonnad tõhusalt paralleelselt töötada ja vähendada eksemplaride kättesaamatusega seotud probleeme.
Amazon SageMakeri kvootide kohta saate lisateavet, kui pääsete juurde dokumentatsioon. Samuti saate lisateavet teenusekvootide kohta siin.
Autoritest
Bruno Klein on masinõppe insener AWS ProServe meeskonnas. Eriti meeldib talle automatiseerimise loomine ja tootmises olevate mudelite elutsükli parandamine. Vabal ajal meeldib talle aega veeta õues ja matkata.
Paras Mehra on AWS-i vanemtootejuht. Ta on keskendunud Amazon SageMakeri koolituse ja töötlemise aitamisele. Vabal ajal veedab Paras meelsasti perega aega ja sõidab lahe piirkonnas maanteerattaga. Leiad ta siit LinkedIn.
- SEO-põhise sisu ja PR-levi. Võimenduge juba täna.
- Platoblockchain. Web3 metaversiooni intelligentsus. Täiustatud teadmised. Juurdepääs siia.
- Allikas: https://aws.amazon.com/blogs/machine-learning/best-practices-for-viewing-and-querying-amazon-sagemaker-service-quota-usage/
- :on
- $ UP
- 10
- 100
- 7
- 8
- a
- MEIST
- juurdepääs
- Ligipääs
- konto
- Kontod
- meetmete
- lisamine
- reguleeritav
- alarm
- Materjal: BPA ja flataatide vaba plastik
- Lubades
- Amazon
- Amazon SageMaker
- ja
- taotlus
- arhitektuur
- PIIRKOND
- ümber
- AS
- At
- automatiseerima
- automaatselt
- saadaval
- AWS
- AWS Lambda
- põhineb
- laht
- BE
- BEST
- parimaid tavasid
- Peale
- ehitama
- by
- CAN
- CD
- kesk-
- kindel
- Vali
- täitma
- seisund
- konsool
- looma
- loodud
- loomine
- loomine
- Kliendid
- andmed
- andmeteadus
- vaikimisi
- Nõudlus
- juurutada
- lähetatud
- määratud
- tõhusalt
- lubatud
- insener
- sisene
- pere
- FUNKTSIOONID
- leidma
- keskendunud
- Järel
- eest
- tasuta
- Alates
- funktsioon
- Git
- antud
- Goes
- Olema
- aidates
- aitab
- Suur
- Kuidas
- HTML
- http
- HTTPS
- Identity
- Paranemist
- in
- hõlmab
- Suurendama
- kasvanud
- Tõstab
- kasvav
- info
- Näiteks
- juhised
- integratsioon
- küsimustes
- kirjed
- jpg
- Õppida
- õppimine
- Tase
- eluring
- nagu
- LIMIT
- piirid
- nimekiri
- liising
- masin
- masinõpe
- tegema
- juhtima
- juhtimine
- juht
- käsitsi
- maksimaalne
- keskmine
- sõnum
- meetriline
- Meetrika
- ML
- MLOps
- mudel
- mudelid
- Jälgida
- monitorid
- rohkem
- mitmekordne
- nimi
- NAVIGATSIOON
- Lähedal
- Vajadus
- Uus
- Uued funktsioonid
- järgmine
- märkmik
- teade
- number
- of
- on
- organisatsioon
- väljas
- pane
- Parallel
- osa
- eriline
- eriti
- Platon
- Platoni andmete intelligentsus
- PlatoData
- võimalik
- post
- tavad
- varem
- töötlemine
- Toode
- tootejuht
- Produktsioon
- jõudma
- jõudis
- Jõuab
- reaalajas
- saadud
- vähendama
- piirkond
- seotud
- taotleda
- Taotlusi
- ressurss
- Vahendid
- tee
- jooks
- salveitegija
- Sam
- sama
- teadus
- vanem
- Serverita
- teenus
- mitu
- peaks
- näitama
- lihtne
- slots
- lahendus
- mõned
- konkreetse
- kulutama
- Kulutused
- Hoidla
- alustatud
- Sammud
- meeskond
- meeskonnad
- šabloon
- terminal
- et
- .
- oma
- seetõttu
- künnis
- Läbi
- aeg
- et
- teema
- Rong
- koolitus
- vallandada
- vallandas
- tõsi
- all
- Kasutus
- kasutama
- Kasutaja
- Kasutajad
- vaade
- Tee..
- koos
- Töö
- oleks
- sa
- Sinu
- sephyrnet