Amazon SageMaker si lahko stranke ogledajo in upravljajo svoje omejitve kvot prek Storitvene kvote. Poleg tega si lahko ogledajo meritve uporabe v skoraj realnem času in ustvarjajo amazoncloudwatch meritve za ogled in programsko poizvedovanje kvot SageMaker.
SageMaker vam pomaga z lahkoto zgraditi, usposobiti in uvesti modele strojnega učenja (ML). Če želite izvedeti več, glejte Kako začeti uporabljati Amazon SageMaker. Storitvene kvote poenostavljajo upravljanje omejitev, saj vam omogočajo ogled in upravljanje vaših kvot za SageMaker z osrednje lokacije.
S kvotami storitev si lahko ogledate največje število virov, dejanj ali elementov v svojem računu AWS ali regiji AWS. Uporabite lahko tudi storitvene kvote, da zahtevate povečanje nastavljivih kvot.
Z vse večjo uporabo praks MLOps in s tem povpraševanja po virih, namenjenih za eksperimentiranje z modelom ML in ponovno usposabljanje, mora več strank zagnati več primerkov, pogosto iste vrste primerkov hkrati.
Številne ekipe za podatkovno znanost pogosto delajo vzporedno in uporabljajo več primerkov za sočasno obdelavo, usposabljanje in prilagajanje. Prej so uporabniki včasih dosegli nastavljivo omejitev računa za določeno vrsto instance in so morali ročno zahtevati povečanje omejitve od AWS.
Če želite ročno zahtevati povečanje kvote od Uporabniški vmesnik storitvenih kvot, lahko izberete kvoto s seznama in izberete Zahtevajte povečanje kvote. Za več informacij glejte Zahteva za povečanje kvote.
V tej objavi prikazujemo, kako lahko uporabite nove funkcije za samodejno zahtevanje povečanja omejitve, ko je dosežena visoka raven instanc.
Pregled rešitev
Naslednji diagram prikazuje arhitekturo rešitev.
Ta arhitektura vključuje naslednji potek dela:
- Meritev CloudWatch spremlja uporabo vira. Alarm CloudWatch se sproži, ko uporaba virov preseže določen vnaprej konfiguriran prag.
- Sporočilo je poslano na Amazon Simple notification Service (Amazon SNS).
- Sporočilo prejme an AWS Lambda Funkcija.
- Funkcija Lambda zahteva povečanje kvote.
Poleg zahteve za povečanje kvote za določen račun lahko funkcija Lambda doda povečanje kvote tudi organizacijska predloga (do 10 kvot). Na ta način ima vsak nov račun, ustvarjen v dani organizaciji AWS, privzeto povečane zahteve za kvoto.
Predpogoji
Izpolnite naslednje predpogojne korake:
- Nastavite AWS račun in ustvarite AWS upravljanje identitete in dostopa (IAM) uporabnik. Za navodila glejte Zavarujte svoj račun AWS.
- namestite AWS SAM CLI.
Razmestite z uporabo brezstrežniškega aplikacijskega modela AWS
Za namestitev aplikacije z uporabo GitHub repo, zaženite naslednji ukaz v terminalu:
Ko je rešitev uvedena, bi morali imeti nov alarm na konzoli CloudWatch. Ta alarm spremlja uporabo primerkov prenosnika SageMaker za primerek ml.t3.medium.
Če vaša poraba virov doseže več kot 50 %, se sproži alarm in funkcija Lambda zahteva povečanje.
Če je račun, ki ga imate, del organizacije AWS in imate predloga zahteve za kvoto omogočeno, bi morali videti ta povečanja tudi na predlogi, če ima predloga prosta mesta. Na ta način imajo novi računi te organizacije tudi povečanja konfigurirana ob ustvarjanju.
Razmestite s konzolo CloudWatch
Za namestitev aplikacije s konzolo CloudWatch izvedite naslednje korake:
- Na konzoli CloudWatch izberite Vsi alarmi v podoknu za krmarjenje.
- Izberite Ustvari alarm.
- Izberite Izberite meritev.
- Izberite Uporaba.
- Izberite meritev, ki jo želite spremljati.
- Izberite pogoj, kdaj želite, da se alarm sproži.
Za več možnih konfiguracij pri konfiguraciji alarma glejte Ustvarite alarm CloudWatch na podlagi statičnega praga.
- Konfigurirajte temo SNS za obveščanje o alarmu.
Amazon SNS lahko uporabite tudi za sprožitev funkcije Lambda, ko se sproži alarm. glej Uporaba AWS Lambda z Amazon SNS za več informacij.
- za Ime alarma, vnesite ime.
- Izberite Naslednji.
- Izberite Ustvari alarm.
Čiščenje
Če želite počistiti vire, ustvarjene kot del te objave, izbrišite vse ustvarjene sklade. Če želite to narediti, zaženite naslednji ukaz:
zaključek
V tej objavi smo pokazali, kako lahko uporabite novo integracijo SageMakerja s kvotami storitev za avtomatizacijo zahtev za povečanje kvote za vire SageMaker. Na ta način lahko ekipe za podatkovno znanost učinkovito delujejo vzporedno in zmanjšajo težave, povezane z nerazpoložljivostjo primerkov.
Več o kvotah Amazon SageMaker lahko izveste tako, da obiščete Dokumentacija. Izvedete lahko tudi več o kvotah storitev tukaj.
O avtorjih
Bruno Klein je inženir strojnega učenja v ekipi AWS ProServe. Še posebej uživa v ustvarjanju avtomatizacije in izboljševanju življenjskega cikla modelov v proizvodnji. V prostem času se rad preživlja na prostem in pohodništvu.
Paras Mehra je višji produktni vodja pri AWS. Osredotočen je na pomoč pri izgradnji Amazon SageMaker Training and Processing. V prostem času Paras rad preživlja čas s svojo družino in kolesari po območju Bay. Najdete ga na LinkedIn.
- Distribucija vsebine in PR s pomočjo SEO. Okrepite se še danes.
- Platoblockchain. Web3 Metaverse Intelligence. Razširjeno znanje. Dostopite tukaj.
- vir: https://aws.amazon.com/blogs/machine-learning/best-practices-for-viewing-and-querying-amazon-sagemaker-service-quota-usage/
- : je
- $GOR
- 10
- 100
- 7
- 8
- a
- O meni
- dostop
- Dostop
- Račun
- računi
- dejavnosti
- Poleg tega
- nastavljiva
- Alarm
- vsi
- Dovoli
- Amazon
- Amazon SageMaker
- in
- uporaba
- Arhitektura
- OBMOČJE
- okoli
- AS
- At
- avtomatizirati
- samodejno
- Na voljo
- AWS
- AWS Lambda
- temeljijo
- zaliv
- BE
- BEST
- najboljše prakse
- Poleg
- izgradnjo
- by
- CAN
- CD
- Osrednji
- nekatere
- Izberite
- dokončanje
- stanje
- Konzole
- ustvarjajo
- ustvaril
- Ustvarjanje
- Oblikovanje
- Stranke, ki so
- datum
- znanost o podatkih
- privzeto
- Povpraševanje
- razporedi
- razporejeni
- imenovani
- učinkovito
- omogočena
- inženir
- Vnesite
- družina
- Lastnosti
- Najdi
- osredotočena
- po
- za
- brezplačno
- iz
- funkcija
- git
- dana
- goes
- Imajo
- pomoč
- Pomaga
- visoka
- Kako
- HTML
- http
- HTTPS
- identiteta
- izboljšanju
- in
- vključuje
- Povečajte
- povečal
- Poveča
- narašča
- Podatki
- primer
- Navodila
- integracija
- Vprašanja
- Izdelkov
- jpg
- UČITE
- učenje
- Stopnja
- življenski krog
- kot
- LIMIT
- Meje
- Seznam
- kraj aktivnosti
- stroj
- strojno učenje
- Znamka
- upravljanje
- upravljanje
- upravitelj
- ročno
- največja
- srednje
- Sporočilo
- meritev
- Meritve
- ML
- MLOps
- Model
- modeli
- monitor
- monitorji
- več
- več
- Ime
- ostalo
- Blizu
- Nimate
- Novo
- Nove funkcije
- Naslednja
- prenosnik
- Obvestilo
- Številka
- of
- on
- Organizacija
- na prostem
- podokno
- vzporedno
- del
- zlasti
- zlasti
- platon
- Platonova podatkovna inteligenca
- PlatoData
- mogoče
- Prispevek
- vaje
- prej
- obravnavati
- Izdelek
- produktni vodja
- proizvodnja
- dosežejo
- dosegel
- Doseže
- v realnem času
- prejetih
- zmanjša
- okolica
- povezane
- zahteva
- zahteva
- vir
- viri
- cesta
- Run
- sagemaker
- sam
- Enako
- Znanost
- višji
- Brez strežnika
- Storitev
- več
- shouldnt
- Prikaži
- Enostavno
- reže
- Rešitev
- nekaj
- specifična
- preživeti
- Poraba
- Skladovnice
- začel
- Koraki
- skupina
- Skupine
- Predloga
- terminal
- da
- O
- njihove
- zato
- Prag
- skozi
- čas
- do
- temo
- Vlak
- usposabljanje
- sprožijo
- sprožilo
- Res
- pod
- Uporaba
- uporaba
- uporabnik
- Uporabniki
- Poglej
- način..
- z
- delo
- bi
- Vi
- Vaša rutina za
- zefirnet