溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務(wù)條款》

python如何下載網(wǎng)頁源碼

發(fā)布時間:2020-09-23 10:56:25 來源:億速云 閱讀:295 作者:Leah 欄目:編程語言

python如何下載網(wǎng)頁源碼?針對這個問題,這篇文章詳細介紹了相對應(yīng)的分析和解答,希望可以幫助更多想解決這個問題的小伙伴找到更簡單易行的方法。

python可以下載網(wǎng)頁的源代碼,使用urllib庫,或者使用更為方便的requests庫。

import urllib2
def download(url, num_retries = 5):
    '''
    function: 下載網(wǎng)頁源代碼,如果遇到 5xx 錯誤狀態(tài),則繼續(xù)嘗試下載,直到下載 num_retries 次為止。
    '''
    print "downloading " , url
    try:
        html = urllib2.urlopen(url).read()
    except urllib2.URLError as e:
        print "download error: " , e.reason
        html = None
        if num_retries > 0:
            if hasattr(e,'code') and 500 <= e.code < 600:
                return download(url, num_retries-1)

    return html

其中 url 即為你想現(xiàn)在的網(wǎng)頁地址。 num_reties 為遇到 5xx 錯誤的時候,重試下載的次數(shù)。

關(guān)于python如何下載網(wǎng)頁源碼問題的解答就分享到這里了,希望以上內(nèi)容可以對大家有一定的幫助,如果你還有很多疑惑沒有解開,可以關(guān)注億速云行業(yè)資訊頻道了解更多相關(guān)知識。

向AI問一下細節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點不代表本網(wǎng)站立場,如果涉及侵權(quán)請聯(lián)系站長郵箱:is@yisu.com進行舉報,并提供相關(guān)證據(jù),一經(jīng)查實,將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI