您好,登錄后才能下訂單哦!
urllib和urllib2的區別?很多新手對此不是很清楚,為了幫助大家解決這個難題,下面小編將為大家詳細講解,有這方面需求的人可以來學習下,希望你能有所收獲。
urllib和urllib2都是接受URL請求的相關模塊,但是提供了不同的功能,最顯著的區別如下:
(1)urllib僅可以接受URL,不能創建,設置headers的request類實例;
(2)但是urllib提供urlencode()方法用來GET查詢字符串的產生,而urllib2則沒有(這是urllib和urllib2經常一起使用的主要原因)
(3)編碼工作使用urllib的urlencode()函數,幫我們將key:value這樣的鍵值對轉換成‘key=value’這樣的字符串,解碼工作可以使用urllib的unquote()函數。
urllib.encode()的使用
urlencode()里面必須是字典類型
# _*_ coding:utf-8 _*_ import urllib dic = {'derek':'編碼'} print urllib.urlencode(dic) #derek=%E7%BC%96%E7%A0%81 m = urllib.urlencode(dic) print urllib.unquote(m) #derek=編碼
一般HTTP請求提交數據,需要編碼成 URL編碼格式,然后做為url的一部分,或者作為參數傳到Request對象中。
GET請求一般用于我們向服務器獲取數據,比如說,我們用百度搜索知乎:https://www.baidu.com/s?wd=知乎
發現GEThttps://www.baidu.com/s?wd=%E7%9F%A5%E4%B9%8E,后面是一個長長的字符串,urldecode后發現就是知乎。
用urllib.urlencode()進行轉碼,然后組合url。
# _*_ coding:utf-8 _*_ import urllib,urllib2 url = 'http://www.baidu.com/s' headers = {'UserAgent':'Mozilla'} keyword = raw_input('請輸入關鍵字:') wd = urllib.urlencode({'wd':keyword}) fullurl = url + '?' + wd print fullurl request = urllib2.Request(fullurl,headers=headers) response = urllib2.urlopen(request) print response.read()
然后輸入關鍵字,爬取下對應的內容。
看完上述內容是否對您有幫助呢?如果還想對相關知識有進一步的了解或閱讀更多相關文章,請關注億速云行業資訊頻道,感謝您對億速云的支持。
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。