91超碰碰碰碰久久久久久综合_超碰av人澡人澡人澡人澡人掠_国产黄大片在线观看画质优化_txt小说免费全本

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

Node.js中怎么爬取豆瓣數據

發布時間:2021-06-17 11:55:44 來源:億速云 閱讀:123 作者:小新 欄目:web開發

小編給大家分享一下Node.js中怎么爬取豆瓣數據,相信大部分人都還不怎么了解,因此分享這篇文章給大家參考一下,希望大家閱讀完這篇文章后大有收獲,下面讓我們一起去了解一下吧!

1、需要解決的問題

  1. 搭建服務

  2. 怎么處理爬到的數據

  3. 怎么自動打開默認瀏覽器

2、搭建服務

搭建服務有好幾種方式,一開始我用的http,但是http有個弊端就是不能解析https協議的url,所以就用了express,解析https協議的網址我用了request包,豆瓣的網址是https的,

今天爬取的是https://movie.douban.com/chart這個網址;如下圖,我要獲取的有三個部分,圖片、電影名字、電影鏈接.

Node.js中怎么爬取豆瓣數據

Node.js中怎么爬取豆瓣數據

3、怎么處理爬到的數據

我們用request爬到的數據,怎么處理呢?cheerio包可以讓我們像Jq那樣處理爬到的html數據。

①、首先解析數據,取到爬取網頁的html數據;

Node.js中怎么爬取豆瓣數據

②、然后利用cheerio包操作爬到的數據,取到你想要的數據。

Node.js中怎么爬取豆瓣數據

③、取到數據,創建html,輸出到頁面。如下圖,我用的字符串拼接,辦法有點笨,還沒有找到更好的辦法。

Node.js中怎么爬取豆瓣數據

4、怎么自動打開默認瀏覽器

不知道你有沒有看vue-cli中webpack的配置,自動打開瀏覽器,vue-cli用的opn包.

Node.js中怎么爬取豆瓣數據

這個包用起來很方便,引入包,直接調用opn(url)即可;

5、展示

Node.js中怎么爬取豆瓣數據

Node.js中怎么爬取豆瓣數據

以上是“Node.js中怎么爬取豆瓣數據”這篇文章的所有內容,感謝各位的閱讀!相信大家都有了一定的了解,希望分享的內容對大家有所幫助,如果還想學習更多知識,歡迎關注億速云行業資訊頻道!

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

三明市| 桃园县| 沁水县| 蓝田县| 凭祥市| 甘孜县| 民勤县| 嫩江县| 临武县| 丰城市| 斗六市| 安徽省| 六盘水市| 夏津县| 祁连县| 贵定县| 崇文区| 雅江县| 鹤庆县| 阿克苏市| 呼伦贝尔市| 日喀则市| 青浦区| 胶南市| 汤阴县| 林州市| 淮北市| 射阳县| 延寿县| 湟源县| 巢湖市| 历史| 花垣县| 进贤县| 浮山县| 拜城县| 兴国县| 皮山县| 枞阳县| 思南县| 怀来县|