Cum folosește Synamedia Amazon Rekognition Video pentru a construi capabilități avansate de căutare video pentru videoclipuri de lungă durată

Synamedia este un furnizor de top de tehnologie video care se adresează nevoilor furnizorilor de servicii video premium și direct-to-consumer (D2C) cu un portofoliu cuprinzător de soluții. Soluțiile Synamedia sunt răspândite pe mai mulți piloni, cum ar fi rețele video, platforme TV, publicitate și monetizare, precum și protecția conținutului și perturbarea pirateriei.

Synamedia a colaborat cu AWS pentru a utiliza inteligența artificială (AI) pentru a dezvolta capabilități îmbunătățite de căutare video pentru videoclipuri de formă lungă. Acest lucru este pentru a-și ajuta clienții să caute videoclipuri bazate pe o descriere a scenelor care nu sunt descrise în metadatele materialelor. De exemplu, căutarea unui videoclip (chiar și în cadrul unei serii) care conținea o scenă pe o barcă care nu este suficient de semnificativă pentru a fi menționată în metadate. Acest lucru permite descoperirea de conținut bazată pe obiecte din lumea reală.

cu Video de recunoaștere Amazon, Synamedia a construit o soluție AI care a fost capabilă să realizeze detectarea etichetelor în videoclipuri și în imagini folosind modele standard și personalizate. Acest lucru a permis detectarea la nivel de scenă a anumitor obiecte în videoclipuri de lungă durată, pe baza a ceea ce este de fapt în scenă la momentul respectiv. Această nouă capacitate permite utilizatorilor să găsească apariții specifice în videoclipul de lungă durată, pe baza doar unei descrieri generale a ceea ce caută. Acest lucru îi permite Synamedia să funcționeze extrem de rapid atunci când încorporează conținut nou, care acum durează câteva ore pentru a porni și a obține rezultate. Soluția este simplu de utilizat și extinsă, oferind posibilitatea de a adăuga alte modele personalizate pentru imagini specifice domeniului.

Utilizarea AI pentru a indexa conținutul vizual

Pe măsură ce oferta de conținut video și cererea de informații video mai bune continuă să crească, capabilitățile eficiente de căutare video devin din ce în ce mai importante. Cu toate acestea, căutarea video tradițională se limitează de obicei la informații de bază, cum ar fi titlul videoclipului sau, în unele cazuri, la metadate atașate ca etichete care descriu temele cheie sau conținutul videoclipului.

Majoritatea informațiilor descriptive trebuie adăugate manual, dar acest lucru devine prohibitiv pe măsură ce cantitatea de videoclipuri crește. Ca rezultat, performanța tradițională a căutării video este adesea limitată. Această limitare este și mai pronunțată pentru conținutul video de lungă durată, pentru care metadatele la nivel de scenă de obicei nu există, având în vedere cât de costisitoare și consumatoare de timp este producerea.

Pentru a rezolva această limitare, Synamedia și-a propus să dezvolte o soluție de căutare video bazată pe inteligență artificială, folosind viziunea computerizată, pentru a identifica automat detaliile la nivel de scenă în orice videoclip dat și pentru a face ca informațiile să fie descoperite de utilizatori pe baza descrierilor generale ale acelor scene.

Folosind Amazon Rekognition pentru a construi o soluție personalizată de viziune computerizată în doar 2 săptămâni

Pentru a atinge acest obiectiv, s-a adresat Avi Fruchter, membru al companiei de inginerie software de la Synamedia Amazon Rekognition, A serviciu de analiză video complet gestionat care ajută la accelerarea procesului de utilizare a modelelor de viziune computerizată pentru a detecta evenimente relevante la nivel de scenă, cum ar fi obiecte, activități și chiar text și scene.

Amazon Rekognition Video accelerează dezvoltarea soluțiilor de viziune computerizată pentru video prin procesarea și etichetarea automată a conținutului video folosind modele de viziune computerizată. Aceste modele sunt pe deplin gestionate și întreținute de Amazon Rekognition. Îndepărtează greutățile nediferențiate ale gestionării infrastructurii necesare și, de asemenea, reduce expertiza tehnică necesară pentru construirea și implementarea acestor modele.

Pentru a începe, pur și simplu alegeți care dintre gama largă de capabilități ale Amazon Rekognition este relevantă pentru sarcina dvs. și apelați API-ul relevant. Rezultatele sunt apoi returnate ca răspuns JSON ușor de gestionat pentru fiecare job.

De exemplu, Synamedia a folosit API-ul StartLabelDetection pentru a genera automat o listă de etichete pentru obiectele detectate în fiecare cadru video al bibliotecii lor video. Din acest simplu apel API, Amazon Rekognition a returnat lista de etichete, scorul de încredere al fiecăruia și marcajele de timp relevante pentru fiecare cadru. Acest lucru a permis Synamedia să creeze imediat un set complet nou de metadate de căutare pentru fiecare videoclip din biblioteca lor de testare. Utilizatorii pot apoi să caute un anumit conținut video doar prin descrierea anumitor obiecte sau peisaje de care sunt interesați și să obțină rezultate care nu numai că se potrivesc cu interogarea lor, dar care îi îndreaptă și către scena specifică din videoclipul care a prezentat acel conținut.

Alte API-uri Amazon Rekognition relevante pentru analiza video sunt StartFaceDetection, StartPersonTracking și StartSegmentDetection—o caracteristică care poate identifica momentul în care scenele dintr-un videoclip se schimbă.

Amazon Rekognition funcționează atât pe videoclipuri pre-înregistrate, cât și pe videoclipuri live. Videoclipul preînregistrat este citit din Serviciul Amazon de stocare simplă (Amazon S3) și video live pot fi procesate de la Fluxuri video Amazon Kinesis.

Synamedia a ales Amazon Rekogntion pentru capacitatea sa de a-și extinde rapid capacitățile. Echipa de inovare a Synamedia este dedicată exclusiv construirii de noi inovații tehnice în domeniul video și are o expertiză tehnică puternică. Cu toate acestea, chiar și pentru ei nu este întotdeauna posibil să aibă o expertiză profundă de domeniu în toate domeniile tehnologiei video. Intrați în Amazon Rekogntion, care și-a extins capacitățile în viziunea computerizată, permițându-le să conceptualizeze un caz de utilizare și să testeze rapid viabilitatea acestuia.

„La bord a fost extrem de rapid, iar rezultatele au fost extrem de rapide”, spune Avi Fruchter. „Nu suntem întotdeauna experți de domeniu în toate domeniile ML, iar Amazon Rekognition ne oferă posibilitatea de a valorifica expertiza noastră existentă în noi tipuri de cazuri de utilizare îmbunătățite pentru clienții noștri.”

Synamedia anticipează că soluția lor va avea beneficii largi pentru o gamă largă de clienți, inclusiv companii cu biblioteci video mari, precum și numărul tot mai mare de companii care trebuie să monitorizeze evenimente specifice în fluxuri video live, cum ar fi riscurile pentru sănătate și siguranță.

Rezumat

Cu Amazon Rekognition Video, Synamedia a reușit să creeze și să testeze o capacitate avansată de căutare video în câteva săptămâni, fără a fi nevoie să angajeze sau să dezvolte expertiză suplimentară specializată în viziunea computerizată.

Această nouă capacitate a permis Synamedia să extindă impactul echipei sale de inovare și să își continue misiunea de a genera noi inovații video pentru clienții săi.

Aflați mai multe despre cum puteți crea rapid soluții avansate de viziune computerizată pentru videoclipuri vizitând Video de recunoaștere Amazon sau referindu-se la Resurse Amazon Rekognition.

Despre autori

Daniel Burke este liderul european pentru AI și ML în grupul Private Equity de la AWS. Daniel lucrează direct cu fonduri de private equity și companiile lor din portofoliu, ajutându-le să-și accelereze adoptarea AI și ML pentru a îmbunătăți inovația și a crește valoarea întreprinderii.

John Shaw este liderul nord-american pentru AI și ML în grupul Private Equity de la AWS. John lucrează direct cu fonduri de private equity și cu companiile lor din portofoliu, ajutându-le să-și accelereze adoptarea AI și ML pentru a îmbunătăți inovația și a crește valoarea întreprinderii.