Kontrollige oma andmesilte visuaalse, ilma koodita tööriistaga, et luua Amazon SageMaker Ground Truth Plusiga kvaliteetseid treeninguandmeid

Käivitatud AWS-is re:Invent 2021, Amazon SageMaker Ground Truth Plus aitab teil luua kvaliteetseid koolitusandmekogumeid, eemaldades andmete märgistamise rakenduste ehitamise ja märgistamise tööjõu haldamisega seotud eristamata raskete raskuste. Kõik, mida saate teha, on andmete jagamine koos märgistamisnõuetega ning Ground Truth Plus seadistab ja haldab teie andmete märgistamise töövoogu nende nõuete alusel. Sealt edasi teostab andmete märgistamist asjatundlik tööjõud, kes on koolitatud mitmesuguste masinõppe (ML) ülesannete jaoks. Ground Truth Plusi kasutamiseks ei vaja te isegi sügavaid ML-teadmisi ega teadmisi töövoo kujundamise ja kvaliteedijuhtimise kohta.

ML-algoritmi jaoks kvaliteetse treeningandmete kogumi loomine on iteratiivne protsess. ML-praktikud loovad sageli andmesiltide kontrollimiseks kohandatud süsteeme, kuna täpselt märgistatud andmed on ML-mudeli kvaliteedi jaoks üliolulised. Kvaliteetsete treeningandmete saamise tagamiseks pakub Ground Truth Plus teile sisseehitatud kasutajaliidest (ülevaate kasutajaliides), et kontrollida andmesiltide kvaliteeti ja anda andmesiltide kohta tagasisidet, kuni olete veendunud, et sildid vastavad täpselt põhitõde või see, mis on reaalses maailmas vahetult jälgitav.

See postitus juhendab teid projektimeeskonna loomiseks ja kasutajaliidese ülevaate tööriista mitmete uute sisseehitatud funktsioonide kasutamiseks, et tõhusalt lõpule viia märgistatud andmestiku kontrollimine. Juhised eeldavad, et teil on aktiivne Ground Truth Plus märgistamisprojekt. Lisateabe saamiseks vt Amazon SageMaker Ground Truth Plus – looge koolitusandmekogumeid ilma koodita või ettevõttesiseste ressurssideta.

Moodusta projektimeeskond

Projektimeeskond annab teie organisatsiooni liikmetele juurdepääsu andmesiltide kontrollimiseks, kasutades kasutajaliidese ülevaate tööriista. Projektimeeskonna loomiseks toimige järgmiselt.

1. On the Ground Truth Plus lohutada, vali Loo projektimeeskond.
2. valima Looge uus Amazon Cognito kasutajarühm . Kui teil on juba olemasolev Amazon Cognito kasutajarühma, valige Liikmete import valik.
3. eest Amazon Cognito kasutajarühma nimi, sisestage nimi. Seda nime ei saa muuta.
4. eest E-posti aadressid, sisestage komaga eraldatuna kuni 50 meeskonnaliikme e-posti aadressid.
5. Vali Loo projektimeeskond.

Teie meeskonnaliikmed saavad meili, mis kutsub neid liituma projekti Ground Truth Plus meeskonnaga. Sealt saavad nad logida sisse projektiportaali Ground Truth Plus, et andmesildid üle vaadata.

Kontrollige märgistatud andmestiku kvaliteeti

Sukeldume nüüd videoobjekti jälgimise näitesse, kasutades CBCL StreetScenes andmestik.

Pärast seda, kui teie partiis olevad andmed on märgistatud, märgitakse partii kui Ülevaatamiseks valmis.

Valige partii ja valige Vaata partii üle. Teid suunatakse ülevaatamise kasutajaliidesesse. Saate paindlikult valida iga ülevaatava partii jaoks erineva proovivõtusageduse. Näiteks on meie näidispaketis kokku viis videot. Saate määrata, kas soovite üle vaadata ainult nende viie video alamhulga või kõik.

Vaatame nüüd läbivaatamise kasutajaliidese erinevaid funktsioone, mis aitavad teil märgistatud andmekogumi kvaliteeti kiiremini kontrollida ja anda kvaliteedi kohta tagasisidet.

• Filtreerige sildid siltide kategooria alusel – Ülevaatusliidese parempoolsel paanil saate silte filtreerida nende sildikategooria alusel. See funktsioon on kasulik, kui on mitu sildikategooriat (nt Vehicles, Pedestriansja Poles) tihedas andmestikuobjektis ja soovite korraga vaadata ühe sildikategooria silte. Näiteks keskendume sellele Car sildi kategooria. Sisestage Car sildi kategooria paremal paanil, et filtreerida kõik ainult tüüpi märkused Car. Järgmised ekraanipildid näitavad kasutajaliidese ülevaatevaadet enne ja pärast filtri rakendamist.
  
• Ülekattega seotud kommenteeritud atribuudi väärtused – Igale sildile saab määrata atribuudid märkuste tegemiseks. Näiteks siltide kategooria jaoks Car , öelge, et soovite paluda töötajatel lisada ka märkused Color  ja Occlusion atribuudid iga sildi eksemplari jaoks. Ülevaate kasutajaliidese laadimisel näete paremal paanil iga sildi eksemplari all vastavaid atribuute. Aga mis siis, kui soovite näha neid atribuutide märkusi otse pildil? Valite sildi Car:1 ja atribuudi märkuste katmiseks Car:1 , vajutad Ctrl + A.
  Nüüd näete annotatsiooni Dark Blue jaoks Color atribuut ja annotatsioon None jaoks Occlusion atribuut, mis kuvatakse otse pildil kõrval Car:1 ümbritsev kast. Nüüd saate seda hõlpsalt kontrollida Car:1 märgiti kui Dark Blue, ilma oklusioonita lihtsalt pildi vaatamisest, selle asemel, et asukohta määrata Car:1 paremal paanil, et näha atribuutide märkusi.
  
• Jäta tagasisidet sildi tasemel – Iga sildi kohta saate jätta tagasisidet selle sildi sildi tasemel Sildi tagasiside vaba stringi atribuut. Näiteks sellel pildil Car:1 tundub rohkem must kui tumesinine. Saate selle lahknevuse edastada tagasisidena Car:1 kasutades Sildi tagasiside väljal, et jälgida selle raami selle sildi kommentaari. Meie sisemine kvaliteedikontrolli tiim vaatab selle tagasiside üle ja teeb märkuste tegemise protsessi ja sildipoliitika muudatusi ning koolitab annotaatoreid vastavalt vajadusele.
  
• Jätke tagasiside kaadri tasemel – Samamoodi saate iga kaadri kohta jätta tagasisidet kaadri tasemel selle kaadri alla Raami tagasiside vaba stringi atribuut. Sel juhul annotatsioonid jaoks Car ja Pedestrian klassid näevad selles kaadris õiged ja hästi rakendatud. Saate seda positiivset tagasisidet edastada kasutades Tagasisidet andma väljale ja teie kommentaar on selle raamiga lingitud.
  
• Kopeerige annotatsiooni tagasiside teistele raamidele – Saate kopeerida nii sildi- kui ka raamitaseme tagasisidet teistele raamidele, kui teete sellel atribuudil paremklõpsu. See funktsioon on kasulik, kui soovite selle sildi jaoks sama tagasisidet raamide vahel dubleerida või rakendada sama kaadritaseme tagasisidet mitmele kaadrile. See funktsioon võimaldab teil andmesiltide kontrolli kiiresti lõpule viia.
  
• Iga andmestikuobjekti kinnitamine või tagasilükkamine – Iga ülevaadatava andmestikuobjekti puhul on teil võimalik valida kumbki Heaks kiitma kui olete märkustega rahul või valige Keelduge kui te pole rahul ja soovite, et need märkused ümber töötataks. Kui valite LIITU, antakse teile võimalus äsja üle vaadatud video heaks kiita või tagasi lükata. Mõlemal juhul võite esitada täiendavaid kommentaare:
  • Kui valite Heaks kiitma, on kommentaar valikuline.
    
  • Kui valite Keelduge, kommentaar on nõutav ja soovitame anda üksikasjalikku tagasisidet. Teie tagasiside vaatab üle spetsiaalne Ground Truth Plusi kvaliteedikontrolli meeskond, kes võtab parandusmeetmeid, et vältida sarnaste vigade esinemist järgmistes videotes.
    

Pärast tagasisidega video esitamist suunatakse teid projektiportaalis tagasi projekti üksikasjade lehele, kus saate vaadata tagasilükatud objektide arvu Tagasilükatud objektid veerg ja veamäär, mis arvutatakse heakskiidetud objektide arvuna läbi vaadatud objektidest Vastuvõtu määr veerus teie projekti iga partii kohta. Näiteks järgmise ekraanipildi 1. partii puhul on aktsepteerimismäär 80%, kuna viiest üle vaadatud objektist võeti vastu neli objekti.

Järeldus

Kvaliteetne koolitusandmekogum on teie ML-algatuste saavutamiseks ülioluline. Ground Truth Plusiga on teil nüüd täiustatud sisseehitatud ülevaate kasutajaliidese tööriist, mis eemaldab eristamata raskused, mis on seotud kohandatud tööriistade loomisega, et kontrollida märgistatud andmestiku kvaliteeti. See postitus tutvustas teile, kuidas luua projektimeeskond ja kasutada kasutajaliidese ülevaate tööriista uusi sisseehitatud funktsioone. Külastage Ground Truth Plus konsool alustada.

Nagu alati, ootab AWS tagasisidet. Palun esitage kõik kommentaarid või küsimused.

Teave Autor

Manish Goel on Amazon SageMaker Ground Truth Plusi tootejuht. Ta on keskendunud selliste toodete loomisele, mis muudavad klientide jaoks masinõppe kasutuselevõtu lihtsamaks. Vabal ajal naudib ta autoreise ja raamatute lugemist.

Revekka Kostoeva on Amazon AWS-i tarkvaraarendaja insener, kus ta töötab klientidele suunatud ja sisemiste lahendustega, et laiendada Sagemaker Ground Truthi teenuste ulatust ja mastaapsust. Teadlasena on ta sunnitud täiustama kaubanduse tööriistu, et innovatsiooni edendada.

• Münditark. Euroopa parim Bitcoini ja krüptobörs.
• Platoblockchain. Web3 metaversiooni intelligentsus. Täiustatud teadmised. TASUTA PÄÄS.
• CryptoHawk. Altcoini radar. Tasuta prooviversioon.
• Allikas: https://aws.amazon.com/blogs/machine-learning/inspect-your-data-labels-with-a-visual-no-code-tool-to-create-high-quality-training-datasets- with-amazon-sagemaker-ground-truth-plus/