Python怎么爬取好看的小視頻

這篇文章主要講解了“Python怎么爬取好看的小視頻”，文中的講解內(nèi)容簡單清晰，易于學(xué)習(xí)與理解，下面請大家跟著小編的思路慢慢深入，一起來研究和學(xué)習(xí)“Python怎么爬取好看的小視頻”吧！

前言

本文的文字及圖片來源于網(wǎng)絡(luò),僅供學(xué)習(xí)、交流使用,不具有任何商業(yè)用途,如有問題請及時(shí)聯(lián)系我們以作處理。

Python爬蟲、數(shù)據(jù)分析、網(wǎng)站開發(fā)等案例教程視頻免費(fèi)在線觀看

https://space.bilibili.com/523606542

基本開發(fā)環(huán)境

• Python 3.6

• Pycharm

相關(guān)模塊的使用

import os
import requests

安裝Python并添加到環(huán)境變量，pip安裝需要的相關(guān)模塊即可。

一、確定需求

爬取搞笑趣味欄目的視頻內(nèi)容。

二、網(wǎng)站數(shù)據(jù)分析

首先需要明確一點(diǎn)，好看視頻網(wǎng)站加載方式是懶加載的方式，需要你下滑網(wǎng)頁才會加載出新的內(nèi)容

加載出來的內(nèi)容里面有音頻播放地址以及標(biāo)題。

內(nèi)容比較簡單，看代碼就行

import os
import requests

url = 'https://haokan.baidu.com/videoui/api/videorec?tab=gaoxiao&act=pcFeed&pd=pc&num=20&shuaxin_id=1612592171486'
headers = {
    'user-agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.138 Safari/537.36'
}
response = requests.get(url=url, headers=headers)
json_data = response.json()
videos = json_data['data']['response']['videos']
for index in videos:
    title = index['title']
    play_url = index['play_url']
    video_content = requests.get(url=play_url, headers=headers).content
    path = 'video\\'
    if not os.path.exists(path):
        os.mkdir(path)
    with open(path + title + '.mp4', mode='wb') as f:
        f.write(video_content)
        print('正在保存：', title)

感謝各位的閱讀，以上就是“Python怎么爬取好看的小視頻”的內(nèi)容了，經(jīng)過本文的學(xué)習(xí)后，相信大家對Python怎么爬取好看的小視頻這一問題有了更深刻的體會，具體使用情況還需要大家實(shí)踐驗(yàn)證。這里是億速云，小編將為大家推送更多相關(guān)知識點(diǎn)的文章，歡迎關(guān)注！