Kuidas Searchmetrics kasutab Amazon SageMakerit, et leida automaatselt asjakohased märksõnad ja muuta oma inimanalüütikud 20% kiiremaks

Otsingumõõdikud on ülemaailmne otsinguandmete, tarkvara ja konsultatsioonilahenduste pakkuja, mis aitab klientidel muuta otsinguandmed ainulaadseteks äriülevaadeteks. Tänaseks on Searchmetrics aidanud enam kui 1,000 ettevõttel, nagu McKinsey & Company, Lowe's ja AXA, leida eelise ülikonkurentsivõimelisel otsingumaastikul.

2021. aastal pöördus Searchmetrics AWS-i poole, et aidata tehisintellekti (AI) kasutamisel oma otsinguülevaateid veelgi täiustada.

Selles postituses jagame, kuidas Searchmetrics ehitas tehisintellekti lahenduse, mis suurendas oma tööjõu efektiivsust 20% võrra, leides mis tahes teema jaoks automaatselt asjakohased otsingumärksõnad, kasutades Amazon SageMaker ja selle loomulik integreerimine Hugging Face'iga.

AI kasutamine märksõnade loendist asjakohasuse tuvastamiseks

Searchmetricsi statistika pakkumise põhiosa on selle võime tuvastada antud teema või otsingu eesmärgi jaoks kõige asjakohasemad otsingumärksõnad.

Selleks on Searchmetricsil analüütikute meeskond, kes hindab teatud märksõnade potentsiaalset asjakohasust konkreetse algsõna alusel. Analüütikud kasutavad sisemist tööriista antud teema märksõna ja potentsiaalselt seotud märksõnade loendi ülevaatamiseks ning peavad seejärel valima ühe või mitu selle teemaga seotud märksõna.

See käsitsi filtreerimise ja valiku protsess oli aeganõudev ja aeglustas Searchmetricsi võimet oma klientidele statistikat edastada.

Selle protsessi täiustamiseks püüdis Searchmetrics luua AI-lahenduse, mis saaks kasutada loomuliku keele töötlust (NLP), et mõista antud otsinguteema eesmärki ja järjestada potentsiaalsete märksõnade loend automaatselt asjakohasuse alusel.

SageMakeri ja Hugging Face kasutamine täiustatud NLP-võimaluste kiireks loomiseks

Selle lahendamiseks pöördus Searchmetricsi insenerimeeskond SageMakeri poole – täieliku masinõppe (ML) platvormi poole, mis aitab arendajatel ja andmeteadlastel kiiresti ja lihtsalt luua, koolitada ja juurutada ML-mudeleid.

SageMaker kiirendab ML-i töökoormuste juurutamist, lihtsustades ML-i koostamisprotsessi. See pakub laia valikut ML-võimalusi lisaks täielikult hallatavale infrastruktuurile. See eemaldab eristamata raskuste tõstmise, mis liiga sageli takistab ML arengut.

Searchmetrics valis SageMakeri, kuna see pakub ML-i arendusprotsessi igal etapil kõiki võimalusi:

• SageMaker märkmikud võimaldas Searchmetricsi meeskonnal kiiresti luua täielikult hallatud ML-i arenduskeskkondi, teostada andmete eeltöötlust ja katsetada erinevaid lähenemisviise
• . partii teisendus SageMakeri võimalused võimaldasid Searchmetricsil tõhusalt oma järelduste kasulikku koormust hulgi töödelda ja hõlpsasti integreerida oma olemasolevasse veebiteenusesse tootmises

Searchmetrics oli eriti huvitatud ka SageMakeri integreerimisest koos Kallistav nägu, põnev NLP idufirma, mis pakub populaarse Tranformersi teegi kaudu lihtsat juurdepääsu enam kui 7,000 eelkoolitatud keelemudelile.

SageMaker pakub Hugging Face'iga otsest integreerimist spetsiaalse kallistava näo hindaja kaudu. SageMaker SDK. See muudab Hugging Face mudelite käitamise täielikult hallatud SageMakeri infrastruktuuris lihtsaks.

Selle integratsiooniga sai Searchmetrics katsetada ja katsetada erinevaid mudeleid ja lähenemisviise, et leida nende kasutusjuhtumitele kõige paremini toimiv lähenemisviis.

Lõpplahendus kasutab kõige asjakohasemate märksõnade tuvastamiseks nullkaadri klassifitseerimiskonveieri. Hinnati erinevaid eelkoolitatud mudeleid ja päringustrateegiaid, koos facebook/bart-large-mnli pakkudes kõige paljutõotavamaid tulemusi.

AWS-i kasutamine tegevuse tõhususe parandamiseks ja uute innovatsioonivõimaluste leidmiseks

SageMakeri ja selle natiivse integreerimisega Hugging Face'iga suutis Searchmetrics luua, koolitada ja juurutada NLP-lahenduse, mis mõistab antud teemat ja reastab täpselt nähtamatu märksõnade loendi nende asjakohasuse alusel. SageMakeri pakutav tööriistakomplekt tegi katsetamise ja juurutamise lihtsamaks.

Searchmetricsi olemasoleva sisemise tööriistaga integreerituna vähendas see tehisintellekti võime keskmiselt 20% aega, mis kulus inimanalüütikutel oma töö lõpetamiseks. Selle tulemuseks oli suurem läbilaskevõime, parem kasutuskogemus ja uute kasutajate kiirem liitumine.

See esialgne edu pole mitte ainult parandanud Searchmetricsi otsinguanalüütikute toimivust, vaid on aidanud Searchmetricsil kaardistada selgema tee terviklikumate automatiseerimislahenduste juurutamiseks, kasutades oma äritegevuses tehisintellekti.

Need põnevad uued innovatsioonivõimalused aitavad Searchmetricsil jätkuvalt parandada oma statistikavõimalusi ja aitavad neil tagada, et kliendid püsiksid jätkuvalt ülikonkurentsivõimelisel otsingumaastikul ees.

Lisaks teatasid Hugging Face ja AWS 2022. aasta alguses partnerlusest, mis muudab Hugging Face mudelite treenimise SageMakeris veelgi lihtsamaks. See funktsioon on saadaval Hugging Face'i arendamise kaudu AWS-i süvaõppekonteinerid (DLC-d). Nende konteinerite hulka kuuluvad Hugging Face Transformers, Tokenizerid ja andmekogumite teek, mis võimaldab meil neid ressursse kasutada koolituste ja järelduste tegemiseks.

Saadaolevate DLC-piltide loendi leiate jaotisest Saadaolevad Süvaõppe konteinerite pildid, mida hooldatakse ja uuendatakse regulaarselt turvapaikadega. Leiate palju näiteid selle kohta, kuidas treenida Hugging Face mudeleid nende DLC-de ja Kallistava näo Python SDK järgnevalt GitHub repo.

Lisateavet selle kohta, kuidas saate tehisintellekti/ML-i abil uuendusi kiirendada, külastage lehte Amazon SageMakeriga alustamine, hankige praktiline õppesisu, vaadates üle Amazon SageMakeri arendaja ressursidvõi külastades Kallistav nägu rakenduses Amazon SageMaker.

---

Teave Autor

Daniel Burke on AWS-i erakapitali grupi AI ja ML Euroopa juht. Daniel töötab otse erakapitali investeerimisfondide ja nende portfelliettevõtetega, aidates neil kiirendada tehisintellekti ja ML kasutuselevõttu, et parandada innovatsiooni ja suurendada ettevõtte väärtust.

• Münditark. Euroopa parim Bitcoini ja krüptobörs.
• Platoblockchain. Web3 metaversiooni intelligentsus. Täiustatud teadmised. TASUTA PÄÄS.
• CryptoHawk. Altcoini radar. Tasuta prooviversioon.
• Allikas: https://aws.amazon.com/blogs/machine-learning/how-searchmetrics-uses-amazon-sagemaker-to-automatically-find-relevant-keywords-and-make-their-human-analysts-20- kiiremini/