91超碰碰碰碰久久久久久综合_超碰av人澡人澡人澡人澡人掠_国产黄大片在线观看画质优化_txt小说免费全本

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

如何用Python爬取高顏值美女

發布時間:2021-10-26 10:03:53 來源:億速云 閱讀:144 作者:柒染 欄目:大數據

如何用Python爬取高顏值美女,相信很多沒有經驗的人對此束手無策,為此本文總結了問題出現的原因和解決方法,通過這篇文章希望你能解決這個問題。

1 數據源

知乎話題『美女』下所有問題中回答所出現的圖片

2 抓取工具

Python 3,并使用第三方庫 Requests、lxml、AipFace,代碼共 100 + 行

3 必要環境

  • Mac / Linux / Windows (Linux 沒測過,理論上可以。Windows 之前較多反應出現異常,后查是 windows 對本地文件名中的字符做了限制,已使用正則過濾)

  • 無需登錄知乎(即無需提供知乎帳號密碼)

  • 人臉檢測服務需要一個百度云帳號(即百度網盤 / 貼吧帳號)

4 人臉檢測庫

AipFace,由百度云 AI 開放平臺提供,是一個可以進行人臉檢測的 Python SDK。可以直接通過 HTTP 訪問,免費使用。

5 檢測過濾條件

  • 過濾所有未出現人臉圖片(比如風景圖、未露臉身材照等)

  • 過濾所有非女性(在抓取中,發現知乎男性圖片基本是明星,故不考慮;存在 AipFace 性別識別不準的情況)

  • 過濾所有非真實人物,比如動漫人物 (AipFace Human 置信度小于 0.6)

  • 過濾所有顏值評分較低圖片(AipFace beauty 屬性小于 45,為了節省存儲空間;再次聲明,AipFace 評分無任何客觀性)

6 實現邏輯

  • 通過 Requests 發起 HTTP 請求,獲取『美女』下的部分討論列表

  • 通過 lxml 解析抓取到的每個討論中 HTML,獲取其中所有的 img 標簽相應的 src 屬性

  • 通過 Requests 發起 HTTP 請求,下載 src 屬性指向圖片(不考慮動圖)

  • 通過 AipFace 請求對圖片進行人臉檢測

  • 判斷是否檢測到人臉,并使用 『4 檢測過濾條件』過濾

  • 將過濾后的圖片持久化到本地文件系統,文件名為 顏值 + 作者 + 問題名 + 序號

  • 返回第一步,繼續

7 抓取結果

直接存放在文件夾中(angelababy 實力出境)。另外說句,目前抓下來的圖片,除 baby 外,88 分是最高分。個人對其中的排序表示反對,老婆竟然不是最高分

如何用Python爬取高顏值美女

如何用Python爬取高顏值美女

如何用Python爬取高顏值美女

代碼

如何用Python爬取高顏值美女

如何用Python爬取高顏值美女

9 運行準備

  • 安裝 Python 3,Download Python

  • 安裝 requests、lxml、baidu-aip 庫,都可以通過 pip 安裝,一行命令

  • 申請百度云檢測服務,免費。人臉識別-百度AI

看完上述內容,你們掌握如何用Python爬取高顏值美女的方法了嗎?如果還想學到更多技能或想了解更多相關內容,歡迎關注億速云行業資訊頻道,感謝各位的閱讀!

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

吉安市| 石楼县| 泰州市| 普格县| 卓尼县| 汉阴县| 舒城县| 特克斯县| 理塘县| 彭州市| 正阳县| 高碑店市| 和政县| 山阴县| 宜城市| 榆中县| 南康市| 乌鲁木齐市| 芦山县| 西乡县| 盐城市| 九江县| 南江县| 忻城县| 灌阳县| 合江县| 宜阳县| 蕲春县| 桦川县| 呼和浩特市| 昌图县| 综艺| 安龙县| 五河县| 苏尼特左旗| 宝清县| 阿荣旗| 丹巴县| 黄浦区| 盐津县| 丰台区|