溫馨提示×

python批量爬取圖片怎么實現(xiàn)

小億
88
2023-11-07 13:51:42
欄目: 編程語言

要實現(xiàn)批量爬取圖片,可以使用Python的requests庫和BeautifulSoup庫來爬取網(wǎng)頁內(nèi)容,然后使用正則表達式或者其他方法提取出圖片的url,最后使用requests庫下載圖片。

下面是一個基本的示例代碼:

import requests
from bs4 import BeautifulSoup
import os

# 定義要爬取的網(wǎng)頁URL
url = 'http://example.com'

# 發(fā)送GET請求獲取網(wǎng)頁內(nèi)容
response = requests.get(url)
html = response.text

# 創(chuàng)建保存圖片的目錄
os.makedirs('images', exist_ok=True)

# 使用BeautifulSoup解析網(wǎng)頁內(nèi)容
soup = BeautifulSoup(html, 'html.parser')

# 查找所有的圖片標簽
img_tags = soup.find_all('img')

# 遍歷圖片標簽,獲取圖片的URL并下載
for img_tag in img_tags:
    img_url = img_tag['src']
    img_name = img_url.split('/')[-1]  # 獲取圖片文件名
    img_path = os.path.join('images', img_name)  # 拼接圖片保存路徑

    # 發(fā)送GET請求下載圖片
    img_response = requests.get(img_url)
    with open(img_path, 'wb') as f:
        f.write(img_response.content)
        print(f'Downloaded {img_path}')

這段代碼會從指定的網(wǎng)頁URL中爬取所有的圖片,并保存到當前目錄下的"images"文件夾中??梢愿鶕?jù)具體需求適當修改代碼。

0