91超碰碰碰碰久久久久久综合_超碰av人澡人澡人澡人澡人掠_国产黄大片在线观看画质优化_txt小说免费全本

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

python怎么偽裝成瀏覽器

發布時間:2022-03-15 10:15:44 來源:億速云 閱讀:181 作者:小新 欄目:開發技術

這篇文章主要為大家展示了“python怎么偽裝成瀏覽器”,內容簡而易懂,條理清晰,希望能夠幫助大家解決疑惑,下面讓小編帶領大家一起研究并學習一下“python怎么偽裝成瀏覽器”這篇文章吧。

偽裝成瀏覽器

某些網站反感爬蟲的到訪,于是對爬蟲一律拒絕請求。所以用urllib2直接訪問網站經常會出現HTTP Error 403: Forbidden的情況。

對有些 header 要特別留意,Server 端會針對這些 header 做檢查:

  • User-Agent 有些 Server 或 Proxy 會檢查該值,用來判斷是否是瀏覽器發起的 Request

  • Content-Type 在使用 REST 接口時,Server 會檢查該值,用來確定 HTTP Body 中的內容該怎樣解析 這時可以通過修改http包中的header來實現,代碼片段如下:

import urllib2
headers = {
    'User-Agent':'Mozilla/5.0 (Windows; U; Windows NT 6.1; en-US; rv:1.9.1.6) Gecko/20091201 Firefox/3.5.6'
}
request = urllib2.Request(
    url = 'http://my.oschina.net/jhao104/blog?catalog=3463517',
    headers = headers
)
print urllib2.urlopen(request).read()

以上是“python怎么偽裝成瀏覽器”這篇文章的所有內容,感謝各位的閱讀!相信大家都有了一定的了解,希望分享的內容對大家有所幫助,如果還想學習更多知識,歡迎關注億速云行業資訊頻道!

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

常宁市| 开封县| 额济纳旗| 建德市| 日照市| 临颍县| 谷城县| 丰顺县| 井研县| 衢州市| 页游| 高青县| 西贡区| 珠海市| 云林县| 南宁市| 历史| 龙岩市| 双柏县| 任丘市| 云霄县| 清丰县| 雷波县| 洱源县| 凤凰县| 团风县| 通河县| 东乌珠穆沁旗| 遵义市| 吕梁市| 邢台市| 浮山县| 汉沽区| 洮南市| 茶陵县| 承德县| 兴文县| 蓝山县| 无极县| 竹山县| 锡林浩特市|