In che modo Synamedia utilizza Amazon Rekognition Video per creare funzionalità di ricerca video avanzate per video di lunga durata

Synamedia è un fornitore leader di tecnologia video che soddisfa le esigenze di fornitori di servizi video premium e direct-to-consumer (D2C) con un portafoglio di soluzioni completo. Le soluzioni Synamedia si estendono su diversi pilastri come reti video, piattaforme TV, pubblicità e monetizzazione, protezione dei contenuti e interruzione della pirateria.

Synamedia ha collaborato con AWS per utilizzare l'intelligenza artificiale (AI) per sviluppare funzionalità di ricerca video avanzate per video di lunga durata. Questo per aiutare i propri clienti nella ricerca di video in base a una descrizione di scene che non sono descritte nei metadati delle risorse. Ad esempio, la ricerca di un video (anche all'interno di una serie) che conteneva una scena su una barca che non è sufficientemente significativa da essere menzionata nei metadati. Ciò consente la scoperta di contenuti guidata da oggetti del mondo reale.

Con Video di riconoscimento di Amazon, Synamedia ha creato una soluzione di intelligenza artificiale in grado di eseguire il rilevamento delle etichette nei video e nelle immagini utilizzando modelli standard e personalizzati. Ciò ha consentito il rilevamento a livello di scena di oggetti specifici nel video di lunga durata, in base a ciò che è effettivamente nella scena in quel momento. Questa nuova funzionalità consente agli utenti di trovare occorrenze specifiche all'interno del video di lunga durata, basandosi solo su una descrizione generale di ciò che stanno cercando. Ciò consente a Synamedia di funzionare in modo estremamente veloce durante l'onboarding di nuovi contenuti, che ora richiedono alcune ore per avviarsi e ottenere risultati. La soluzione è semplice da usare ed estesa, poiché offre la possibilità di aggiungere ulteriori modelli personalizzati per immagini specifiche del dominio.

Utilizzo dell'IA per indicizzare i contenuti visivi

Poiché sia ​​l'offerta di contenuti video che la domanda di approfondimenti video più approfonditi continuano a crescere, le capacità di ricerca video efficaci stanno diventando sempre più importanti. La ricerca video tradizionale, tuttavia, è in genere limitata alle informazioni di base come il titolo del video o, in alcuni casi, ai metadati allegati come tag che descrivono i temi chiave o il contenuto del video.

La maggior parte delle informazioni descrittive deve essere aggiunta manualmente, ma questo diventa proibitivo con l'aumentare della quantità di video. Di conseguenza, il rendimento della ricerca video tradizionale è spesso limitato. Questa limitazione è ancora più pronunciata per i contenuti video di lunga durata, per i quali di solito non esistono metadati a livello di scena, dato quanto è costoso e dispendioso in termini di tempo da produrre.

Per affrontare questa limitazione, Synamedia ha deciso di sviluppare una soluzione di ricerca video basata sull'intelligenza artificiale che utilizza la visione artificiale per identificare automaticamente i dettagli a livello di scena in un dato video e rendere tali informazioni rilevabili dagli utenti in base alle descrizioni generali di tali scene.

Utilizzo di Amazon Rekognition per creare una soluzione di visione artificiale personalizzata in sole 2 settimane

Per raggiungere questo obiettivo, il Software Engineering Fellow di Synamedia, Avi Fruchter, si è rivolto a Rekognition di Amazon, un servizio di analisi video completamente gestito che aiuta ad accelerare il processo di utilizzo dei modelli di visione artificiale per rilevare occorrenze rilevanti a livello di scena come oggetti, attività e persino testo e scene.

Amazon Rekognition Video accelera lo sviluppo di soluzioni di visione artificiale per i video elaborando e contrassegnando automaticamente i contenuti video utilizzando modelli di visione artificiale. Questi modelli sono completamente gestiti e mantenuti da Amazon Recognition. Rimuove il lavoro gravoso indifferenziato della gestione dell'infrastruttura necessaria e riduce anche l'esperienza tecnica richiesta per costruire e distribuire questi modelli.

Per iniziare, scegli semplicemente quale dell'ampia gamma di funzionalità di Amazon Rekognition è rilevante per la tua attività e chiama l'API pertinente. I risultati vengono quindi restituiti come risposta JSON facile da gestire per ogni processo.

Ad esempio, Synamedia ha utilizzato l'API StartLabelDetection per generare automaticamente un elenco di etichette per gli oggetti rilevati in ogni fotogramma video della loro libreria video. Da questa semplice chiamata API, Amazon Rekognition ha restituito l'elenco delle etichette, il punteggio di affidabilità di ciascuna e i timestamp pertinenti per ciascun frame. Ciò ha consentito a Synamedia di creare immediatamente un insieme completamente nuovo di metadati di ricerca per ogni video nella propria libreria di test. Gli utenti possono quindi cercare contenuti video specifici semplicemente descrivendo oggetti o scenari specifici a cui sono interessati e ottenere risultati che non solo corrispondono alla loro query, ma che li indirizzano anche alla scena specifica del video che presentava quel contenuto.

Altre API Amazon Rekognition rilevanti per l'analisi video sono StartFaceDetection, StartPersonTracking e StartSegmentDetection, una funzionalità in grado di identificare il momento in cui le scene di un video cambiano.

Amazon Rekognition funziona sia su video preregistrati che live. Viene letto il video preregistrato Servizio di archiviazione semplice Amazon (Amazon S3) e il video live può essere elaborato da Streaming video Amazon Kinesis.

Synamedia ha scelto Amazon Rekogntion per la sua capacità di espandere rapidamente le proprie capacità. Il team di innovazione di Synamedia è dedicato esclusivamente alla creazione di nuove innovazioni tecniche nel video e ha una forte competenza tecnica. Tuttavia, anche per loro non è sempre possibile avere una profonda esperienza di dominio in tutte le aree della tecnologia video. Entra in Amazon Rekogntion, che ha esteso le proprie capacità di visione artificiale, consentendo loro di concettualizzare un caso d'uso e testarne rapidamente la fattibilità.

"È stato estremamente veloce salire a bordo e i risultati sono stati estremamente rapidi", afferma Avi Fruchter. "Non siamo sempre esperti di dominio in tutte le aree del ML e Amazon Rekognition ci offre la possibilità di sfruttare la nostra esperienza esistente in nuovi tipi di casi d'uso avanzati per i nostri clienti".

Synamedia prevede che la loro soluzione avrà ampi vantaggi per un'ampia gamma di clienti, comprese le aziende con grandi librerie video e il numero crescente di aziende che hanno bisogno di monitorare eventi specifici nei feed video live, come i rischi per la salute e la sicurezza.

Sommario

Con Amazon Rekognition Video, Synamedia è stata in grado di creare e testare una capacità di ricerca video avanzata nel giro di poche settimane, senza dover assumere o sviluppare ulteriori competenze specializzate nella visione artificiale.

Questa nuova capacità ha consentito a Synamedia di espandere l'impatto del suo team di innovazione e di continuare con la sua missione di guidare la nuova innovazione video per i suoi clienti.

Scopri di più su come creare rapidamente soluzioni avanzate di visione artificiale per i video visitando il sito Video di riconoscimento di Amazon o riferito a Risorse di Amazon Recognition.

Circa gli autori

Daniele Burke è il leader europeo per AI e ML nel gruppo di private equity di AWS. Daniel lavora direttamente con i fondi di Private Equity e le loro società in portafoglio, aiutandoli ad accelerare l'adozione di AI e ML per migliorare l'innovazione e aumentare il valore dell'impresa.

Giovanni Shaw è il leader nordamericano per AI e ML nel gruppo di private equity di AWS. John lavora direttamente con i fondi di Private Equity e le loro società in portafoglio, aiutandoli ad accelerare l'adozione di AI e ML per migliorare l'innovazione e aumentare il valore dell'impresa.