解密FFmpeg播放track mode控制

上一篇文章我們解決了在FFmpeg下如何處理H264和AAC的擴(kuò)展數(shù)據(jù)，根據(jù)解出的NALU長度恢復(fù)了H264的起始碼和AAC的ADTS頭，這樣一般來說播放是沒有問題。本篇文章來談?wù)勅绾螌?shí)現(xiàn)基于FFmpeg的track mode控制，也就是如何用FFmpeg提供的功能來實(shí)現(xiàn)基本的seek、快進(jìn)、快退。好了，廢話少了，下面開始基于FFmpeg的track mode之旅。

FFmpeg提供了一個(gè)seek函數(shù)，原型如下：

int av_seek_frame(AVFormatContext *s, int stream_index, int64_t timestamp,                   int flags);

參數(shù)說明：

s：操作上下文；

stream_index：基本流索引，表示當(dāng)前的seek是針對哪個(gè)基本流，比如視頻或者音頻等等。

timestamp：要seek的時(shí)間點(diǎn)，以time_base或者AV_TIME_BASE為單位。

Flags：seek標(biāo)志，可以設(shè)置為按字節(jié)，在按時(shí)間seek時(shí)取該點(diǎn)之前還是之后的關(guān)鍵幀，以及不按關(guān)鍵幀seek等，詳細(xì)請參考FFmpeg的avformat.h說明。基于FFmpeg的所有track mode幾乎都是用這個(gè)函數(shù)來直接或間接實(shí)現(xiàn)的。

• 文件的seek功能實(shí)現(xiàn)

要轉(zhuǎn)跳到視頻100秒（100 000毫秒）處的第一個(gè)I幀（如果沒有則向前找第一個(gè)）：

av_seek_frame(pFormatCtx, vid_index, 100000*vid_time_scale/time_base, AVSEEK_FLAG_BACKWARD);

跳到音頻80秒（80 000毫秒）處的幀（采樣）：

av_seek_frame(pFormatCtx, aud_index, 80000*aud_time_scale/ time_base, AVSEEK_FLAG_BACKWARD);

跳到文件開始的地方開始播放：

av_seek_frame(pFormatCtx, vid_index, 0, AVSEEK_FLAG_BACKWARD);

上面的time_scale、time_base都能通過流信息獲取到，請參考前面的文章。有的文件不一定能seek成功，可以考慮在失敗的情況下將AVSEEK_FLAG_BACKWARD改為AVSEEK_FLAG_ANY再次seek，不過seek到的視頻幀可能不是I幀。

這個(gè)函數(shù)不管你當(dāng)前在什么時(shí)間點(diǎn)上，都可以seek到任何合理位置。比如要實(shí)現(xiàn)在當(dāng)前的基礎(chǔ)上向后或向前跳轉(zhuǎn)10秒，我們可以在av_read_frame函數(shù)拿到的包中含有當(dāng)前時(shí)間戳的基礎(chǔ)上增加或較少一個(gè)10000（換算成播放時(shí)間單位）再seek即可。所以這個(gè)函數(shù)可以用做進(jìn)度的拖放、前進(jìn)/后退一定時(shí)間、循環(huán)播放等功能。

1. 快進(jìn)快退

對于快進(jìn)來說，一般×××能實(shí)現(xiàn)2倍甚至再高倍速的播放，這種情況直接按照上一篇文章的基本播放流程就可以了。但對于4倍、8倍、16倍、32倍等高速播放，一般不能像傳統(tǒng)播放那樣一幀一幀的送數(shù)據(jù)，不只是解碼能力問題，數(shù)據(jù)讀取也可能因?yàn)閹挷粔蚋簧?，我們只能提取其中?/span>I幀進(jìn)行播放，將B幀和P幀丟掉。下面我們就來討論這個(gè)過程的實(shí)現(xiàn)流程。

快進(jìn)時(shí)，通過當(dāng)前數(shù)據(jù)包獲得當(dāng)前的時(shí)間PTS，將該PTS換算成時(shí)間再加上一小段時(shí)間，作為seek時(shí)間點(diǎn)向后找關(guān)鍵幀，此時(shí)flags可設(shè)置為AVSEEK_FLAG_FRAME。之后用av_read_frame獲取到該關(guān)鍵幀。完成該幀解碼顯示后，再在該幀的PTS時(shí)間上增加一小段時(shí)間后seek，這樣一直重復(fù)上述過程，流程如下圖：

快退時(shí)，通過當(dāng)前數(shù)據(jù)包獲得當(dāng)前的時(shí)間PTS，將該PTS換算成時(shí)間再減去一小段時(shí)間，作為seek時(shí)間點(diǎn)向前找關(guān)鍵幀，此時(shí)flags可設(shè)置為AVSEEK_FLAG_BACKWARD。之后用av_read_frame獲取到該關(guān)鍵幀。完成該幀解碼顯示后，再在該幀的PTS時(shí)間上減去一小段時(shí)間后seek，這樣一直重復(fù)上述結(jié)果，過程如下圖：

這樣，我們通過以上對av_seek_frame函數(shù)的運(yùn)用，即可完成文件playback的各種track mode實(shí)現(xiàn)，其實(shí)理解了這個(gè)函數(shù)后，你還會(huì)有很多其他辦法來實(shí)現(xiàn)，這里只是提供了一種簡單且占內(nèi)存少的辦法。在特定的情況下還可以先全部走一遍所有幀，并記錄下全部的I幀的時(shí)間戳、幀編號、位置信息等需要的信息，然后直接從該表里面獲取信息后進(jìn)行seek和讀取這些關(guān)鍵幀進(jìn)行快速播放。

想第一時(shí)間獲得更多原創(chuàng)文章，請關(guān)注個(gè)人微信公眾平臺(tái)：程序員互動(dòng)聯(lián)盟(coder_online)，掃一掃下方二維碼或者搜索微信號coder_online即可關(guān)注，里面有大量Android，Chromium，Linux，編程技巧等相關(guān)文章等著您，我們還可以在線交流。

如需轉(zhuǎn)載本文，請注明出處。

謝謝合作！