溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務(wù)條款》

python寫代理ip的方法有哪些

發(fā)布時間:2020-10-29 09:40:00 來源:億速云 閱讀:167 作者:小新 欄目:編程語言

小編給大家分享一下python寫代理ip的方法有哪些,相信大部分人都還不怎么了解,因此分享這篇文章給大家參考一下,希望大家閱讀完這篇文章后大有收獲,下面讓我們一起去了解一下吧!

python寫代理ip的方法:首先創(chuàng)建代理ip對象,并定制一個opener對象;然后安裝opener對象,以后的urlopen就一直使用這個代理地址。

python寫代理ip的方法:

方法1:

先創(chuàng)建代理ip對象

proxy_support = urllib.request.ProxyHandler({'https':'117.64.149.137:808'})

定制一個opener對象

opener = urllib.request.build_opener(proxy_support)

安裝這個opener對象,以后的urlopen就一直使用這個代理地址了

urllib.request.install_opener(opener)

發(fā)出請求時,就是用到這個代理地址了

html = urllib.request.urlopen('xxxxxxxxxx').read()

方法2:

先創(chuàng)建代理ip對象

proxy_support = urllib.request.ProxyHandler({'https':'117.64.149.137:808'})

定制一個opener對象

opener = urllib.request.build_opener(proxy_support)

這里可以直接使用opener對象發(fā)出請求

html = opener.open('xxxxxxxxx').read()

示例代碼:

import urllib.request
#這一段三句話是為了請求時帶上瀏覽器標(biāo)識,因為有的網(wǎng)站看到是爬蟲的標(biāo)識直接返回403
#請求的網(wǎng)站不涉及到提交數(shù)據(jù),所以沒有給出data參數(shù)
url = 'https://whatismyipaddress.com/'
header = {'User-Agent':'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/71.0.3578.98 Safari/537.36'}
req = urllib.request.Request(url,headers=header)
#使用代理和還原不使用代理的方法
#if語句相當(dāng)于一個開關(guān),不要寫成True
use_proxy = urllib.request.ProxyHandler({'https':'117.64.149.137:808'})
null_proxy = urllib.request.ProxyHandler()
if True:
    opener = urllib.request.build_opener(use_proxy)
else:
    opener = urllib.request.build_opener(null_proxy)
#根據(jù)上面的開關(guān),安裝的opener對象是否帶有代理地址
urllib.request.install_opener(opener)
#獲取返回結(jié)果
#同時可以使用html = opener.open(req).read()獲取結(jié)果
html = urllib.request.urlopen(req).read()
#這網(wǎng)頁返回頁面的內(nèi)容太多,在控制臺不好查看,
#并且返回的內(nèi)容是二進制格式,可以直接寫入文件,當(dāng)個網(wǎng)頁查看
with open('E:\\whatismyip.html','wb') as file:
    file.write(html)
    print('OK')

以上是python寫代理ip的方法有哪些的所有內(nèi)容,感謝各位的閱讀!相信大家都有了一定的了解,希望分享的內(nèi)容對大家有所幫助,如果還想學(xué)習(xí)更多知識,歡迎關(guān)注億速云行業(yè)資訊頻道!

向AI問一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點不代表本網(wǎng)站立場,如果涉及侵權(quán)請聯(lián)系站長郵箱:is@yisu.com進行舉報,并提供相關(guān)證據(jù),一經(jīng)查實,將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI