62.Azure AI+機(jī)器學(xué)習(xí)綜合能力展現(xiàn)之視頻索引器

之前介紹了很多用于Demo的微軟Azure AI和機(jī)器學(xué)習(xí)的能力用于演示，這次介紹一個(gè)網(wǎng)站可以用于強(qiáng)大的視頻分析：AMS視頻索引器

在這個(gè)網(wǎng)站可以上傳一個(gè)本地視頻用于視頻分析，上傳成功后可以根據(jù)這個(gè)視頻做很多不同維度的分析，比如這里我從本地計(jì)算機(jī)上傳一個(gè)視頻后經(jīng)過一會(huì)的分析檢索后就可以點(diǎn)擊播放

播放后會(huì)看到分析出該視頻出現(xiàn)了多少個(gè)人，每一個(gè)人出現(xiàn)在整個(gè)視頻的多少秒或一個(gè)區(qū)間，視頻中出現(xiàn)多少個(gè)話題

以及識(shí)別出該視頻出現(xiàn)了哪些出現(xiàn)頻率比較高的關(guān)鍵字；出現(xiàn)過的所有物體標(biāo)簽，比如人，男人，外面，窗戶，墻等；還識(shí)別出視頻里出現(xiàn)了什么品牌，這些所有的標(biāo)簽或品牌出現(xiàn)在視頻的多少秒或區(qū)間都標(biāo)示出來，可以快速點(diǎn)擊切換到這幾秒

還識(shí)別出整個(gè)視頻中的某一個(gè)人在這個(gè)視頻中情感是怎樣的，百分之多少是開心的等等

還識(shí)別出該視頻出現(xiàn)了多少個(gè)場景以及我選中的這個(gè)人物在整個(gè)視頻中出現(xiàn)的關(guān)鍵幀，這些都可以點(diǎn)擊去快進(jìn)回退到出現(xiàn)該人的幀或秒

其次還在時(shí)間線里可以語音轉(zhuǎn)文本的方式實(shí)現(xiàn)整個(gè)視頻的字幕體現(xiàn)，隨著播放的語音而字幕自動(dòng)滾動(dòng)

并且還可以對該文本翻譯成需要的需要顯示的語種來展示

當(dāng)然還可以查看各種標(biāo)簽穿插在整個(gè)事件線里的位置，以及編輯文本的內(nèi)容進(jìn)行內(nèi)容修訂

最后還可以下載腳本，見解，以及翻譯的txt文本等

如果下載VTT文件就可以通過本地播放器在本地播放這個(gè)未經(jīng)分析的源視頻配上字幕（選擇下載好的VTT文件）來一起播放了，感覺是不是很簡單

從這個(gè)視頻索引分析來看其實(shí)后端結(jié)合了多種微軟Azure的AI+機(jī)器學(xué)習(xí)的服務(wù)來綜合使用，例如用到了計(jì)算機(jī)視覺對別場景和物體等，人臉識(shí)別識(shí)別視頻中出現(xiàn)的人臉，用到了語音服務(wù)，對視頻里原本沒有字幕的視頻配上英文字幕并且再結(jié)合翻譯服務(wù)將英文轉(zhuǎn)譯成你需要的語種，比如中文等，利用情感識(shí)別對視頻中的人物喜怒哀樂進(jìn)行百分比的分類等，所以但從一個(gè)簡單的視頻就分析出多種維度不同的見解還是非常有意思的。如果您感興趣也可以自己動(dòng)手來體驗(yàn)感受感受。