您好,登錄后才能下訂單哦!
本篇文章給大家分享的是有關(guān)Pytho中Cookie的使用方法,小編覺(jué)得挺實(shí)用的,因此分享給大家學(xué)習(xí),希望大家閱讀完這篇文章后可以有所收獲,話不多說(shuō),跟著小編一起來(lái)看看吧。
接下來(lái)我們一起來(lái)看一下Cookie的使用。
為什么要使用Cookie呢?
Cookie,指某些網(wǎng)站為了辨別用戶(hù)身份、進(jìn)行session跟蹤而儲(chǔ)存在用戶(hù)本地終端上的數(shù)據(jù)(通常經(jīng)過(guò)加密)
比如說(shuō)有些網(wǎng)站需要登錄后才能訪問(wèn)某個(gè)頁(yè)面,在登錄之前,你想抓取某個(gè)頁(yè)面內(nèi)容是不允許的。那么我們可以利用Urllib2庫(kù)保存我們登錄的Cookie,然后再抓取其他頁(yè)面就達(dá)到目的了。(廈門(mén)電動(dòng)叉車(chē) python support)
在此之前呢,我們必須先介紹一個(gè)opener的概念。
當(dāng)你獲取一個(gè)URL你使用一個(gè)opener(一個(gè)urllib2.OpenerDirector的實(shí)例)。在前面,我們都是使用的默認(rèn)的opener,也就是urlopen。它是一個(gè)特殊的opener,可以理解成opener的一個(gè)特殊實(shí)例,傳入的參數(shù)僅僅是url,,timeout。
如果我們需要用到Cookie,只用這個(gè)opener是不能達(dá)到目的的,所以我們需要?jiǎng)?chuàng)建更一般的opener來(lái)實(shí)現(xiàn)對(duì)Cookie的設(shè)置。
cookielib模塊的主要作用是提供可存儲(chǔ)cookie的對(duì)象,以便于與urllib2模塊配合使用來(lái)訪問(wèn)Internet資源。 Cookielib模塊非常強(qiáng)大,我們可以利用本模塊的CookieJar類(lèi)的對(duì)象來(lái)捕獲cookie并在后續(xù)連接請(qǐng)求時(shí)重新發(fā)送,比如可以實(shí)現(xiàn)模擬登錄 功能。該模塊主要的對(duì)象有CookieJar、FileCookieJar、MozillaCookieJar、LWPCookieJar。
它們的關(guān)系:CookieJar —-派生—->FileCookieJar —-派生—–>MozillaCookieJar和LWPCookieJar
首先,我們先利用CookieJar對(duì)象實(shí)現(xiàn)獲取cookie的功能,到變量中,先來(lái)感受一下
Python
import urllib2 import cookielib #聲明一個(gè)CookieJar對(duì)象實(shí)例來(lái)保存cookie cookie = cookielib.CookieJar() #利用urllib2庫(kù)的HTTPCookieProcessor對(duì)象來(lái)創(chuàng)建cookie處理器 handler=urllib2.HTTPCookieProcessor(cookie) #通過(guò)handler來(lái)構(gòu)建opener opener = urllib2.build_opener(handler) #此處的open方法同urllib2的urlopen方法,也可以傳入request response = opener.open('http://www.baidu.com') for item in cookie: print 'Name = '+item.name print 'Value = '+item.value |
我們使用以上方法將cookie保存到變量中,然后打印出了cookie中的值,運(yùn)行結(jié)果如下
Python
Name = BAIDUID Value = B07B663B645729F11F659C02AAE65B4C:FG=1 Name = BAIDUPSID Value = B07B663B645729F11F659C02AAE65B4C Name = H_PS_PSSID Value = 12527_11076_1438_10633 Name = BDSVRTM Value = 0 Name = BD_HOME Value = 0 |
在上面的方法中,我們將cookie保存到了cookie這個(gè)變量中,如果我們想將cookie保存到文件中該怎么做呢?這時(shí),我們就要用到
FileCookieJar這個(gè)對(duì)象了,在這里我們使用它的子類(lèi)MozillaCookieJar來(lái)實(shí)現(xiàn)Cookie的保存
Python
import cookielib import urllib2
#設(shè)置保存cookie的文件,同級(jí)目錄下的cookie.txt filename = 'cookie.txt' #聲明一個(gè)MozillaCookieJar對(duì)象實(shí)例來(lái)保存cookie,之后寫(xiě)入文件 cookie = cookielib.MozillaCookieJar(filename) #利用urllib2庫(kù)的HTTPCookieProcessor對(duì)象來(lái)創(chuàng)建cookie處理器 handler = urllib2.HTTPCookieProcessor(cookie) #通過(guò)handler來(lái)構(gòu)建opener opener = urllib2.build_opener(handler) #創(chuàng)建一個(gè)請(qǐng)求,原理同urllib2的urlopen response = opener.open("http://www.baidu.com") #保存cookie到文件 cookie.save(ignore_discard=True, ignore_expires=True) |
關(guān)于最后save方法的兩個(gè)參數(shù)在此說(shuō)明一下:
官方解釋如下:
ignore_discard: save even cookies set to be discarded.
ignore_expires: save even cookies that have expiredThe file is overwritten if it already exists
由此可見(jiàn),ignore_discard的意思是即使cookies將被丟棄也將它保存下來(lái),ignore_expires的意思是如果在該文件中 cookies已經(jīng)存在,則覆蓋原文件寫(xiě)入,在這里,我們將這兩個(gè)全部設(shè)置為T(mén)rue。運(yùn)行之后,cookies將被保存到cookie.txt文件中, 我們查看一下內(nèi)容,附圖如下
那么我們已經(jīng)做到把Cookie保存到文件中了,如果以后想使用,可以利用下面的方法來(lái)讀取cookie并訪問(wèn)網(wǎng)站,感受一下
Python
import cookielib import urllib2
#創(chuàng)建MozillaCookieJar實(shí)例對(duì)象 cookie = cookielib.MozillaCookieJar() #從文件中讀取cookie內(nèi)容到變量 cookie.load('cookie.txt', ignore_discard=True, ignore_expires=True) #創(chuàng)建請(qǐng)求的request req = urllib2.Request("http://www.baidu.com") #利用urllib2的build_opener方法創(chuàng)建一個(gè)opener opener = urllib2.build_opener(urllib2.HTTPCookieProcessor(cookie)) response = opener.open(req) print response.read() |
設(shè)想,如果我們的 cookie.txt 文件中保存的是某個(gè)人登錄百度的cookie,那么我們提取出這個(gè)cookie文件內(nèi)容,就可以用以上方法模擬這個(gè)人的賬號(hào)登錄百度。
下面我們以我們學(xué)校的為例,利用cookie實(shí)現(xiàn)模擬登錄,并將cookie信息保存到文本文件中,來(lái)感受一下cookie大法吧!
注意:密碼我改了啊,別偷偷登錄本宮的選課系統(tǒng) o(╯□╰)o
Python
import urllib import urllib2 import cookielib
filename = 'cookie.txt' #聲明一個(gè)MozillaCookieJar對(duì)象實(shí)例來(lái)保存cookie,之后寫(xiě)入文件 cookie = cookielib.MozillaCookieJar(filename) opener = urllib2.build_opener(urllib2.HTTPCookieProcessor(cookie)) postdata = urllib.urlencode({ 'stuid':'201200131012', 'pwd':'23342321' }) #登錄教務(wù)系統(tǒng)的URL loginUrl = 'http://jwxt.sdu.edu.cn:7890/pls/wwwbks/bks_login2.login' #模擬登錄,并把cookie保存到變量 result = opener.open(loginUrl,postdata) #保存cookie到cookie.txt中 cookie.save(ignore_discard=True, ignore_expires=True) #利用cookie請(qǐng)求訪問(wèn)另一個(gè)網(wǎng)址,此網(wǎng)址是成績(jī)查詢(xún)網(wǎng)址 gradeUrl = 'http://jwxt.sdu.edu.cn:7890/pls/wwwbks/bkscjcx.curscopre' #請(qǐng)求訪問(wèn)成績(jī)查詢(xún)網(wǎng)址 result = opener.open(gradeUrl) print result.read() |
以上程序的原理如下
創(chuàng)建一個(gè)帶有cookie的opener,在訪問(wèn)登錄的URL時(shí),將登錄后的cookie保存下來(lái),然后利用這個(gè)cookie來(lái)訪問(wèn)其他網(wǎng)址。
如登錄之后才能查看的查詢(xún)呀,本學(xué)期課表呀等等網(wǎng)址,模擬登錄就這么實(shí)現(xiàn)啦,是不是很酷炫?
好,小伙伴們要加油哦!我們現(xiàn)在可以順利獲取網(wǎng)站信息了,接下來(lái)就是把網(wǎng)站里面有效內(nèi)容提取出來(lái)。
以上就是Pytho中Cookie的使用方法,小編相信有部分知識(shí)點(diǎn)可能是我們?nèi)粘9ぷ鲿?huì)見(jiàn)到或用到的。希望你能通過(guò)這篇文章學(xué)到更多知識(shí)。更多詳情敬請(qǐng)關(guān)注億速云行業(yè)資訊頻道。
免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如果涉及侵權(quán)請(qǐng)聯(lián)系站長(zhǎng)郵箱:is@yisu.com進(jìn)行舉報(bào),并提供相關(guān)證據(jù),一經(jīng)查實(shí),將立刻刪除涉嫌侵權(quán)內(nèi)容。