溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊(cè)×
其他方式登錄
點(diǎn)擊 登錄注冊(cè) 即表示同意《億速云用戶服務(wù)條款》

怎么使用Python下載抖音各大V視頻

發(fā)布時(shí)間:2021-11-12 10:38:54 來(lái)源:億速云 閱讀:204 作者:小新 欄目:大數(shù)據(jù)

這篇文章將為大家詳細(xì)講解有關(guān)怎么使用Python下載抖音各大V視頻,小編覺(jué)得挺實(shí)用的,因此分享給大家做個(gè)參考,希望大家閱讀完這篇文章后可以有所收獲。

思路

先說(shuō)下思路,要批量下載視頻,可以先嘗試成功下載一個(gè),確定沒(méi)有水印,然后在寫(xiě)一個(gè)循環(huán)進(jìn)行批量下載。

難點(diǎn):下載一個(gè)視頻可能很簡(jiǎn)單,但下載多個(gè)就稍微有點(diǎn)復(fù)雜,需要抓取多個(gè)視頻對(duì)應(yīng)的 url,抖音這塊做了防爬措施,只允許手機(jī)上看到個(gè)人主頁(yè)的視頻列表,電腦端的網(wǎng)頁(yè)卻看不到,這就需要抓取手機(jī)的 https 包,這里借助 Burpsuite 進(jìn)行抓包。

怎么使用Python下載抖音各大V視頻

這里面有個(gè) play_addr,內(nèi)部有個(gè) urllist,我們復(fù)制這個(gè) urllist[0] 在瀏覽器打開(kāi),網(wǎng)站跳轉(zhuǎn)到了真正的播放地址,同時(shí)可以看到下載的按鈕:

下載這個(gè)視頻,發(fā)現(xiàn)是帶水印的,如何下載到不帶水印的視頻呢?網(wǎng)上搜索了下,方法就是將上述 urllist[0] 中的 playwm 改成 play 就可以了。

然后開(kāi)始寫(xiě)代碼,獲取這個(gè) urllist[0],并下載

def get(share_url) -> dict:
    """
    share_url -> 抖音視頻分享url
    返回格式 [{'url':'', 'title','format':'',},{}]
    """
    data = []
    headers = {
        'accept': 'application/json',
        'user-agent': 'Mozilla/5.0 (iPhone; CPU iPhone OS 11_0 like Mac OS X) AppleWebKit/604.1.38 (KHTML, like Gecko) Version/11.0 Mobile/15A372 Safari/604.1'
    }
    api = "https://www.iesdouyin.com/web/api/v2/aweme/iteminfo/?item_ids={item_id}"

    rep = requests.get(share_url, headers=headers, timeout=10)
    if rep.ok:
        # item_id
        item_id = re.findall(r'video/(\d+)', rep.url)
        if item_id:
            item_id = item_id[0]
            # video info
            rep = requests.get(api.format(item_id=item_id), headers=headers, timeout=10)
            if rep.ok and rep.json()["status_code"] == 0:
                info = rep.json()["item_list"][0]
                tmp = {}
                tmp["title"] = info["desc"]

                #去水印的視頻鏈接
                play_url = info["video"]["play_addr"]["url_list"][0].replace('playwm', 'play')
                tmp["url"] = play_url
                tmp["format"] = 'mp4'
                data.append(tmp)

    return data

if __name__ =='__main__':
    videos = get('https://www.iesdouyin.com/share/video/6920538027345415431/?region=&mid=6920538030852885262&u_code=48&titleType=title&did=0&iid=0')
    for video in videos:
        downloader.download(video['url'],video['title'],video['format'],'./download')

這里 downloader.download 函數(shù),與前文知乎視頻下載 里的函數(shù)一樣,這里就不貼代碼了。

獲取個(gè)人主頁(yè)視頻鏈接

前兩步已經(jīng)實(shí)現(xiàn)了單個(gè)抖音視頻的無(wú)水印下載,現(xiàn)在我們要做的就是找到大量的這種鏈接,直接循環(huán)就可以了。

任意打開(kāi)一個(gè)大 V 的個(gè)人主頁(yè),分享,復(fù)制鏈接,使用瀏覽器打開(kāi),一個(gè)視頻也看不到,而使用抖音 App 就可以看到:

怎么使用Python下載抖音各大V視頻

瀏覽器

怎么使用Python下載抖音各大V視頻

注意不要設(shè)置 ip 為 127.0.0.1,這樣設(shè)置的話,只有本地請(qǐng)求可以使用代理,手機(jī)無(wú)法連接此代理。

2、手機(jī)設(shè)置代理

手機(jī)與電腦連接同一 wifi,IPhone 的操作如下:然后進(jìn)入設(shè)置-> 無(wú)線局域網(wǎng) -> 點(diǎn)擊同一 wifi 右邊的 information 符號(hào),然后下拉,點(diǎn)擊配置代理,配置和 BurpSuite 一樣的 ip 和端口。Android 的手機(jī)的設(shè)置也差不多。至此可以在 BurpSuite 上抓取手機(jī)的 http 流量。

3、手機(jī)下載 Burp 的證書(shū),并設(shè)置信任

  1. 手機(jī)瀏覽器 進(jìn)入 http://burp。

  2. 點(diǎn)擊 CA 下載證書(shū)。

  3. 設(shè)置->通用->描述文件->點(diǎn)擊 PortSwigger CA->安裝

  4. 設(shè)置->通用->關(guān)于本機(jī)->證書(shū)信任設(shè)置,將 BurpSuite 的證書(shū)開(kāi)啟

這樣就可以抓取手機(jī)上發(fā)起的 https 包了。

4、設(shè)置 BurpSuite 中斷

怎么使用Python下載抖音各大V視頻

然后打開(kāi) BurpSuite 的 Repeater 選項(xiàng)卡,就可以看到剛才發(fā)過(guò)來(lái)的請(qǐng)求,這時(shí)我們選擇重放,看數(shù)據(jù),決定我們需要使用的接口,如下圖所示:

發(fā)現(xiàn)這個(gè)接口滿足請(qǐng)求,這里可以看到接口的 url,headers 的各種參數(shù),headers 中的 User-Agent 參數(shù),是區(qū)分客戶端是瀏覽器還是 App 的重要標(biāo)識(shí),因此就可以寫(xiě)代碼來(lái)模擬請(qǐng)求,進(jìn)而獲取需要的批量下載鏈接。

由于 url 中的參數(shù)非常多,有些是固定不變的,有些隨著不同人的主頁(yè)參數(shù)會(huì)發(fā)生變化,如果僅僅是自己使用,可以簡(jiǎn)單的通過(guò)正則表達(dá)式來(lái)提取這些 url 鏈接,然后進(jìn)行批量下載就可以了。

如果是想寫(xiě)好一個(gè)腳本供別人使用,那么就需要做更多的工作,比如說(shuō),需要查看更多的 api,以便確定 url 及 headers 中的參數(shù)是如何獲取或生成的,然后寫(xiě)腳本自動(dòng)化這一過(guò)程,有些情況下,還涉及到加密混淆等反爬措施,這里就不再展開(kāi)了,請(qǐng)感興趣的讀者自行探索。

最后的話

爬取視頻的關(guān)鍵在于找到視頻的播放地址,有了播放地址,即使不寫(xiě)代碼,也可以使用瀏覽器下載,尋找播放地址還不夠,要考慮是否能去水印,如果要批量下載,那就要知道如何獲取更多的視頻鏈接,在瀏覽器抓取不到的時(shí)候,考慮使用 BurpSuite 抓取手機(jī)的流量包,進(jìn)一步提取接口的數(shù)據(jù),或模擬手機(jī)請(qǐng)求,對(duì)搞爬蟲(chóng)的同學(xué),BurpSuite 是一個(gè)瑞士軍刀,非常實(shí)用。

關(guān)于“怎么使用Python下載抖音各大V視頻”這篇文章就分享到這里了,希望以上內(nèi)容可以對(duì)大家有一定的幫助,使各位可以學(xué)到更多知識(shí),如果覺(jué)得文章不錯(cuò),請(qǐng)把它分享出去讓更多的人看到。

向AI問(wèn)一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如果涉及侵權(quán)請(qǐng)聯(lián)系站長(zhǎng)郵箱:is@yisu.com進(jìn)行舉報(bào),并提供相關(guān)證據(jù),一經(jīng)查實(shí),將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI