您好,登錄后才能下訂單哦!
我就廢話不多說了,直接上代碼吧!
import urllib.request import requests import time import ssl import random def openUrl(ip, agent): headers = {'User-Agent': agent} proxies = {'http' : ip} requests.get("https://www.baidu.com", headers=headers, proxies=proxies, verify=True) ssl._create_default_https_context = ssl._create_unverified_context print("Access to success.") #IP池 #IP來源: # http://www.xicidaili.com/ # https://www.kuaidaili.com/free/ def randomIP(): ip = random.choice(['120.78.78.141', '122.72.18.35', '120.92.119.229']) return ip #User-Agent #User-Agent來源:http://www.useragentstring.com/pages/useragentstring.php def randomUserAgent(): UserAgent = random.choice(['Mozilla/5.0 (Windows NT 6.1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/41.0.2228.0 Safari/537.36', 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_10_1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/41.0.2227.1 Safari/537.36', 'Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/41.0.2227.0 Safari/537.36']) return UserAgent if __name__ == '__main__': for i in range(10): ip = randomIP() agent = randomUserAgent() openUrl(ip, agent) time.sleep(1)
補充拓展:Python模擬瀏覽器實現網頁訪問方式
模擬瀏覽器請求數據:
import socket # 創建TCP鏈接 tcp_socket = socket.socket(socket.AF_INET, socket.SOCK_STREAM) # DNS 解析和鏈接HTTP服務器 tcp_socket.connect(("www.qq.com", 80)) # 編寫請求頭, 發送HTTP請求報文 # 請求行 request_line = "GET / HTTP/1.1\r\n" # 請求頭,設置請求域名 request_header = "www.qq.com\r\n" request_data = request_line + request_header + "\r\n" # 發送請求 tcp_socket.send(request_data.encode("utf-8")) # 接收響應報文,指定長度 response_data = tcp_socket.recv(4096) # 對響應報文進行解析 --切割 response_str_data = response_data.decode("utf-8") print(response_data) # "\r\n\r\n" 之后的數據就是響應體數據 index = response_str_data.find("\r\n\r\n") # 切割出的數據就是文件數據 html_data = response_str_data[index+4:] # 在當前路徑下新建文件存儲響應數據 with open("index.html", "wb") as file: file.write(html_data.encode()) # 關閉套接字 tcp_socket.close()
以上這篇Python實現自動訪問網頁的例子就是小編分享給大家的全部內容了,希望能給大家一個參考,也希望大家多多支持億速云。
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。