62.Azure AI+機器學習綜合能力展現之視頻索引器

之前介紹了很多用於Demo的微軟Azure AI和機器學習的能力用於演示,這次介紹一個網站可以用於強大的視頻分析:AMS視頻索引器

image

在這個網站可以上傳一個本地視頻用於視頻分析,上傳成功後可以根據這個視頻做很多不同維度的分析,比如這裏我從本地計算機上傳一個視頻後經過一會的分析檢索後就可以點擊播放

image

播放後會看到分析出該視頻出現了多少個人,每一個人出現在整個視頻的多少秒或一個區間,視頻中出現多少個話題

image

以及識別出該視頻出現了哪些出現頻率比較高的關鍵字;出現過的所有物體標籤,比如人,男人,外面,窗戶,牆等;還識別出視頻裏出現了什麼品牌,這些所有的標籤或品牌出現在視頻的多少秒或區間都標示出來,可以快速點擊切換到這幾秒

image

還識別出整個視頻中的某一個人在這個視頻中情感是怎樣的,百分之多少是開心的等等

image

還識別出該視頻出現了多少個場景以及我選中的這個人物在整個視頻中出現的關鍵幀,這些都可以點擊去快進回退到出現該人的幀或秒

image

其次還在時間線裏可以語音轉文本的方式實現整個視頻的字幕體現,隨着播放的語音而字幕自動滾動

image

並且還可以對該文本翻譯成需要的需要顯示的語種來展示

image

當然還可以查看各種標籤穿插在整個事件線裏的位置,以及編輯文本的內容進行內容修訂

image

最後還可以下載腳本,見解,以及翻譯的txt文本等

image

如果下載VTT文件就可以通過本地播放器在本地播放這個未經分析的源視頻配上字幕(選擇下載好的VTT文件)來一起播放了,感覺是不是很簡單

image

從這個視頻索引分析來看其實後端結合了多種微軟Azure的AI+機器學習的服務來綜合使用,例如用到了計算機視覺對別場景和物體等,人臉識別識別視頻中出現的人臉,用到了語音服務,對視頻裏原本沒有字幕的視頻配上英文字幕並且再結合翻譯服務將英文轉譯成你需要的語種,比如中文等,利用情感識別對視頻中的人物喜怒哀樂進行百分比的分類等,所以但從一個簡單的視頻就分析出多種維度不同的見解還是非常有意思的。如果您感興趣也可以自己動手來體驗感受感受。

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章