python爬蟲(chóng)獲取cookie的方法

這篇文章將為大家詳細(xì)講解有關(guān)python爬蟲(chóng)獲取cookie的方法，小編覺(jué)得挺實(shí)用的，因此分享給大家做個(gè)參考，希望大家閱讀完這篇文章后可以有所收獲。

Cookie，指某些網(wǎng)站為了辨別用戶身份、進(jìn)行session跟蹤而儲(chǔ)存在用戶本地終端上的數(shù)據(jù)（通常經(jīng)過(guò)加密)。 比如說(shuō)有些網(wǎng)站需要登錄后才能訪問(wèn)某個(gè)頁(yè)面，在登錄之前，你想抓取某個(gè)頁(yè)面內(nèi)容，登陸前與登陸后是不同的，或者不允許的。

在python中它為我們提供了cookiejar模塊，它位于http包中，用于對(duì)Cookie的支持。通過(guò)它我們能捕獲cookie并在后續(xù)連接請(qǐng)求時(shí)重新發(fā)送，比如可以實(shí)現(xiàn)模擬登錄功能。該模塊主要的對(duì)象有CookieJar、FileCookieJar、MozillaCookieJar、LWPCookieJar。

cookie的獲取方法

## cookie的獲取

# -*- coding: UTF-8 -*-
from urllib import request
from http import cookiejar
if __name__ == '__main__':
    #聲明一個(gè)CookieJar對(duì)象實(shí)例來(lái)保存cookie
    cookie = cookiejar.CookieJar()
    #利用urllib.request庫(kù)的HTTPCookieProcessor對(duì)象來(lái)創(chuàng)建cookie處理器,也就CookieHandler
    handler=request.HTTPCookieProcessor(cookie)
    #通過(guò)CookieHandler創(chuàng)建opener
    opener = request.build_opener(handler)
    #此處的open方法打開(kāi)網(wǎng)頁(yè)
    response = opener.open('http://www.baidu.com')
    #打印cookie信息
    for item in cookie:
        print('Name = %s' % item.name)
        print('Value = %s' % item.value)

關(guān)于python爬蟲(chóng)獲取cookie的方法就分享到這里了，希望以上內(nèi)容可以對(duì)大家有一定的幫助，可以學(xué)到更多知識(shí)。如果覺(jué)得文章不錯(cuò)，可以把它分享出去讓更多的人看到。