La rete neurale di una startup può comprendere i video

Negli ultimi anni, i ricercatori di aziende tra cui Google e Facebook hanno fatto progressi impressionanti nei software di formazione per capire cosa sta succedendo nelle immagini, grazie a una tecnica nota come deep learning. Ora una startup ha chiamato Clarifai offre un servizio che utilizza il deep learning per comprendere i video.





Il software di elaborazione video di Clarifai è in grado di identificare oggetti e scene nel video e fornisce una sequenza temporale in modo da poter saltare al punto in cui appare un determinato elemento.

L'azienda afferma che il suo software può analizzare rapidamente i video clip per riconoscere 10.000 oggetti o tipi di scena diversi. In una demo data la scorsa settimana a conferenza sull'apprendimento profondo , il cofondatore e CEO di Clarifai Matthew Zeiler ha caricato una clip che includeva filmati di un variegato paesaggio alpino. Il software ha creato una sequenza temporale con linee del grafico che riepilogano quando sono stati rilevati diversi oggetti o tipi di scena. Ha mostrato esattamente quando la neve e le montagne si sono verificate individualmente e insieme. Il software può analizzare il video più velocemente di quanto un essere umano possa guardarlo; nella dimostrazione, la clip di 3,5 minuti è stata elaborata in soli 10 secondi.

Clarifai offre la tecnologia come servizio e prevede che venga utilizzata per cose come l'abbinamento di annunci ai contenuti nei video online o lo sviluppo di nuovi modi per organizzare raccolte di video e modificare filmati.



Il deep learning implica l'elaborazione dei dati attraverso una rete di semplici neuroni simulati che sono stati addestrati utilizzando dati di esempio. La tecnologia di Clarifai ha avuto origine nella ricerca presso la New York University e nel 2013 l'azienda ha preso il primi cinque posti al principale concorso annuale per software che identifica il contenuto delle immagini.

La maggior parte della ricerca nel campo si è finora concentrata sulle immagini fisse, non sui video. Clarifai ha lanciato lo scorso anno un servizio di riconoscimento di immagini fisse. Un'altra startup che utilizza il deep learning, Sulla destra , a fine dicembre ha lanciato il proprio servizio di elaborazione video.

Chiunque può mettere alla prova il nuovo sistema video di Clarifai. Sul suo sito Web, puoi caricare un video clip di dimensioni fino a 10 megabyte per l'analisi. I diversi oggetti o tipi di scena rilevati potrebbero includere automobili, alberi o persone. Il software può anche applicare concetti descrittivi più astratti, come divertimento o stare insieme.



Zeiler crede che la sua tecnologia potrebbe portare a un nuovo approccio per offrire pubblicità insieme ai video online. Il software è in grado di identificare dove nel video è il posto ottimale per inserire un annuncio, ha detto.

Le aziende possono già pagare per posizionare i propri annunci accanto a video di un tipo particolare o su un argomento particolare. Zeiler ritiene che essere in grado di abbinare automaticamente gli annunci a momenti particolari nei video dovrebbe essere ancora più interessante per gli inserzionisti. La tecnologia di Clarifai potrebbe consentire, ad esempio, a Starbucks di far apparire i suoi annunci ogni volta che il caffè viene consumato nei filmati.

Zeiler afferma di lavorare già con aziende interessate a utilizzare la tecnologia di analisi video. L'azienda sta anche lavorando per fare in modo che il software faccia di più. Due funzionalità in fase di sviluppo consentiranno al software di riassumere automaticamente ciò che accade in un video e riconoscere quando si è svolta una particolare attività, afferma Zeiler.



nascondere