您好,登錄后才能下訂單哦!
這篇文章將為大家詳細講解有關python爬蟲中cookie的操作示例,小編覺得挺實用的,因此分享給大家做個參考,希望大家閱讀完這篇文章后可以有所收獲。
Python是一種跨平臺的、具有解釋性、編譯性、互動性和面向對象的腳本語言,其最初的設計是用于編寫自動化腳本,隨著版本的不斷更新和新功能的添加,常用于用于開發獨立的項目和大型項目。
python爬蟲在客戶端訪問Web服務器時,服務器可以根據Cookie來跟蹤客戶狀態,這對于需要區別客戶的場合(如電子商務)特別有用。cookie存在與緩存中或者硬盤中,在硬盤中的是一些文本文件,當你訪問該網站時,就會讀取對應的網站的cookie信息。
1、cookie的格式:
Set-Cookie: NAME=VALUE;Expires/Max-age=DATE;Path=PATH;Domain=DOMAIN_NAME;SECURE
參數意義:
NAME:cookie的名字。
VALUE:cookie的值。
Expires:cookie的過期時間。
Path:cookie作用的路徑。該 Cookie 是在當前的哪個路徑下生成的,如 path=/wp-admin/。
Domain:cookie作用的域名。
SECURE:是否只在https協議下起作用。如果設置了這個屬性,那么只會在 SSH 連接時才會回傳該 Cookie
2、cookie機制
當用戶第一次訪問并登陸一個網站的時候,cookie的設置以及發送會經歷以下4個步驟:
客戶端發送一個請求到服務器 --》 服務器發送一個HttpResponse響應到客戶端,其中包含Set-Cookie的頭部 --》 客戶端保存cookie,之后向服務器發送請求時,HttpRequest請求中會包含一個Cookie的頭部 --》服務器返回響應數據。
3、cookie實例:從本地加載cookie
從本地加載cookie,需要使用cookiejar的load方法,并且也需要指定方法:
from urllib import request,parse from http.cookiejar import MozillaCookieJar #加載本地cookie #保存cookie到本地文件 cookiejar1=MozillaCookieJar('cookie.txt') cookiejar1.load(ignore_discard=True) handler=request.HTTPCookieProcessor(cookiejar) opener=request.build_opener(handler) resp=opener.open('http://httpbin.org/cookies') for cookie in cookiejar1: #將cookie打印到控制臺 print(cookie)
關于“python爬蟲中cookie的操作示例”這篇文章就分享到這里了,希望以上內容可以對大家有一定的幫助,使各位可以學到更多知識,如果覺得文章不錯,請把它分享出去讓更多的人看到。
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。