怎么利用Python來收集圖片數據

本篇內容主要講解“怎么利用Python來收集圖片數據”，感興趣的朋友不妨來看看。本文介紹的方法操作簡單快捷，實用性強。下面就讓小編來帶大家學習“怎么利用Python來收集圖片數據”吧!

發送請求

我們首先確定網址，我們先使用開發者工具，定位到我們要的數據。發現，內容就在網頁源代碼中。

url = 'https://www.hexuexiao.cn/tj/WuJiayi/'

res = requests.get(url)

# print(res.text)
html_url = re.findall('<a href="https://www.hexuexiao.cn/a/(\d+).html" rel="external nofollow"  >',res.text,re.S)
urls = sorted(list(set(html_url)), key=html_url.index)

我們這里html_url 變量的值是一個正則表達式對象，用于匹配網站圖片的鏈接。代碼塊 list(set(html_url)) 將列表對象轉換為集合對象，使用 set() 方法將列表對象轉換為集合對象，這是一個將列表中的元素轉換為集合的方法。html_url.index 是一個整數對象，表示 html_url中各元素在原始 HTML 字符串中出現的次數，以此來實現排序。

保存數據

for url1 in urls:
    for page in range(0,10):
        url2 = f'https://www.hexuexiao.cn/a/{url1}-{page}.html'
        # print(url2)
        res1 = requests.get(url2)
        # print(res1.text)
        url3 = re.findall('<img src=(.*?)/></a>',res1.text,re.S)[0]
        print(url3)
        url3=re.sub('',"",url3)
        print(url3)

我們這段代碼中的 urls 列表是一個字典，其中鍵是 URL，值是頁碼。在循環中，我們使用 range() 函數從 0 到 9 迭代頁碼。接下來，我們使用 requests.get() 方法分別獲取每個頁面的 HTML 代碼，并使用正則表達式匹配出所有的圖片鏈接。最后，我們使用 requests.get() 方法獲取每個圖片鏈接的內容，并將其寫入一個文件中。

保存圖片

 content = requests.get(url3).content
        with open('圖片\' + str(num) + '.jpg', mode='wb') as f:
            f.write(content)

我們這段代碼中的 content 變量的值是從圖片鏈接 url3 中獲取的內容。然后，使用 with open() 語句打開一個二進制文件，并將 content 寫入文件中。在這個過程中，num 變量的值是當前文件中的圖片序號。獲取圖片和我們之前獲取音頻一樣，都是保存成二進制文件。

這樣，我們的圖片數據就保存下來了。這里，我就不展示效果了，原理都是一樣的，找到圖片的地址，我們就可以獲取下來。

到此，相信大家對“怎么利用Python來收集圖片數據”有了更深的了解，不妨來實際操作一番吧！這里是億速云網站，更多相關內容可以進入相關頻道進行查詢，關注我們，繼續學習！