您好,登錄后才能下訂單哦!
本文實例講述了Python簡單實現網頁內容抓取功能。分享給大家供大家參考,具體如下:
使用模塊:
import urllib2 import urllib
普通抓取實例:
#!/usr/bin/python # -*- coding: UTF-8 -*- import urllib2 url = 'http://www.baidu.com' #創建request對象 request = urllib2.Request(url) #發送請求,獲取結果 try: response = urllib2.urlopen(request) except BaseException, err: print err exit() #獲取狀態碼,如果是200表示獲取成功 code = response.getcode() print code #讀取內容 if 200 == code: content = response.read() print content
Get請求抓取實例:
#!/usr/bin/python # -*- coding: UTF-8 -*- import urllib2 import urllib #urllib2使用GET方式的請求 url = 'http://www.baidu.com/s' values = {'wd' : '車云'} # 必須編碼 data = urllib.urlencode(values) url = url + '?' + data print url #url == http://www.baidu.com/s?wd=%E8%BD%A6%E4%BA%91 #創建request對象 request = urllib2.Request(url) #發送請求,獲取結果 try: response = urllib2.urlopen(request) except BaseException, err: print err exit() #獲取狀態碼,如果是200表示獲取成功 code = response.getcode() print code #讀取內容 if 200 == code: content = response.read() print content
更多關于Python相關內容可查看本站專題:《Python Socket編程技巧總結》、《Python正則表達式用法總結》、《Python數據結構與算法教程》、《Python函數使用技巧總結》、《Python字符串操作技巧匯總》、《Python入門與進階經典教程》及《Python文件與目錄操作技巧匯總》
希望本文所述對大家Python程序設計有所幫助。
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。