Python如何實(shí)現(xiàn)爬取美女主播圖片

這篇文章將為大家詳細(xì)講解有關(guān)Python如何實(shí)現(xiàn)爬取美女主播圖片，小編覺得挺實(shí)用的，因此分享給大家做個(gè)參考，希望大家閱讀完這篇文章后可以有所收獲。

前言

本文的文字及圖片來源于網(wǎng)絡(luò),僅供學(xué)習(xí)、交流使用

項(xiàng)目目標(biāo)

主播照片

目標(biāo)地址

https://www.huya.com/g/2168

基本環(huán)境配置

• python 3.6

• pycharm

• requests

• parsel

爬蟲代碼

導(dǎo)入工具

import requests
import parsel

解析網(wǎng)頁

爬取數(shù)據(jù)

url = 'https://www.huya.com/g/2168'
headers = {    'user-agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.138 Safari/537.36'
}response = requests.get(url=url, headers=headers)selector = parsel.Selector(response.text)urls = selector.css('.live-list .game-live-item a img::attr(data-original)').getall()
titles = selector.css('.live-list .game-live-item a img::attr(title)').getall()
info_data = zip(urls, titles)for i in info_data:
    img_url = i[0].split('?')[0]
    title = i[1]
    img_url_response = requests.get(url=img_url, headers=headers)    path = 'D:\\python\\demo\\虎牙\\img\\' + title + '.jpg'
    with open(path, mode='wb') as f:
        f.write(img_url_response.content)
        print(title)

關(guān)于“Python如何實(shí)現(xiàn)爬取美女主播圖片”這篇文章就分享到這里了，希望以上內(nèi)容可以對(duì)大家有一定的幫助，使各位可以學(xué)到更多知識(shí)，如果覺得文章不錯(cuò)，請(qǐng)把它分享出去讓更多的人看到。