91超碰碰碰碰久久久久久综合_超碰av人澡人澡人澡人澡人掠_国产黄大片在线观看画质优化_txt小说免费全本

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

Python實現自動訪問網頁的例子

發布時間:2020-10-09 03:03:15 來源:腳本之家 閱讀:212 作者:白水你一定要努力啊 欄目:開發技術

我就廢話不多說了,直接上代碼吧!

import urllib.request
import requests
import time
import ssl
import random

def openUrl(ip, agent):
 headers = {'User-Agent': agent}
 proxies = {'http' : ip}
 requests.get("https://www.baidu.com", headers=headers, proxies=proxies, verify=True)
 ssl._create_default_https_context = ssl._create_unverified_context
 print("Access to success.")

#IP池
#IP來源:
# http://www.xicidaili.com/
# https://www.kuaidaili.com/free/
def randomIP():
 ip = random.choice(['120.78.78.141', '122.72.18.35', '120.92.119.229'])
 return ip

#User-Agent
#User-Agent來源:http://www.useragentstring.com/pages/useragentstring.php
def randomUserAgent():
 UserAgent = random.choice(['Mozilla/5.0 (Windows NT 6.1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/41.0.2228.0 Safari/537.36',
        'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_10_1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/41.0.2227.1 Safari/537.36',
        'Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/41.0.2227.0 Safari/537.36'])
 return UserAgent

if __name__ == '__main__':
 for i in range(10):
  ip = randomIP()
  agent = randomUserAgent()
  openUrl(ip, agent)
  time.sleep(1)

補充拓展:Python模擬瀏覽器實現網頁訪問方式

模擬瀏覽器請求數據:

import socket

# 創建TCP鏈接
tcp_socket = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
# DNS 解析和鏈接HTTP服務器
tcp_socket.connect(("www.qq.com", 80))

# 編寫請求頭, 發送HTTP請求報文
# 請求行
request_line = "GET / HTTP/1.1\r\n"
# 請求頭,設置請求域名
request_header = "www.qq.com\r\n"
request_data = request_line + request_header + "\r\n"

# 發送請求
tcp_socket.send(request_data.encode("utf-8"))
# 接收響應報文,指定長度
response_data = tcp_socket.recv(4096)
# 對響應報文進行解析 --切割
response_str_data = response_data.decode("utf-8")
print(response_data)
# "\r\n\r\n" 之后的數據就是響應體數據
index = response_str_data.find("\r\n\r\n")
# 切割出的數據就是文件數據
html_data = response_str_data[index+4:]
# 在當前路徑下新建文件存儲響應數據
with open("index.html", "wb") as file:
 file.write(html_data.encode())
# 關閉套接字
tcp_socket.close()

以上這篇Python實現自動訪問網頁的例子就是小編分享給大家的全部內容了,希望能給大家一個參考,也希望大家多多支持億速云。

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

德惠市| 兰溪市| 杭锦后旗| 南开区| 会同县| 泸西县| 水富县| 大竹县| 东辽县| 龙胜| 旌德县| 望奎县| 洞口县| 卓尼县| 林西县| 安丘市| 青海省| 吉木萨尔县| 贵德县| 伊宁县| 新丰县| 新化县| 莱西市| 来凤县| 中江县| 九龙县| 聊城市| 大余县| 万盛区| 辽宁省| 尉犁县| 三门峡市| 江永县| 葫芦岛市| 宁强县| 新乡县| 克什克腾旗| 虹口区| 修文县| 克山县| 从江县|