91超碰碰碰碰久久久久久综合_超碰av人澡人澡人澡人澡人掠_国产黄大片在线观看画质优化_txt小说免费全本

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

命令行批量截圖Node腳本示例代碼

發布時間:2020-09-05 21:57:02 來源:腳本之家 閱讀:139 作者:fantasticbaby 欄目:web開發

批量截圖任務

作為一個軟件工程師,不只是做好自己的本職工作(iOS),而是需要解決項目中的技術問題。這次就是解決自動截圖的問題

早期公司的數據工程師利用 phantomjs 來截圖,后期不斷發現截圖效率低,加之開發者團隊不再維護,因此決定將截圖這部分跟你剝離開來,以后方便開發維護。我就承擔了這個工作

puppeteer

Puppeteer is a Node library which provides a high-level API to control Chrome or Chromium over the DevTools Protocol. Puppeteer runs headless by default, but can be configured to run full (non-headless) Chrome or Chromium.

安裝問題

一開始按照往常的套路(npm install --save puppeteer) 好幾次都卡住了,后期查找資料發現切換到國內的鏡像就可以順利下載

PUPPETEER_DOWNLOAD_HOST=https://storage.googleapis.com.cnpmjs.org npm i --save puppeteer
  • To use Puppeteer in your project, run:
PUPPETEER_DOWNLOAD_HOST=https://storage.googleapis.com.cnpmjs.org npm i --save puppeteer
  • Install some basic packages
npm install

Usage

const puppeteer = require('puppeteer'),
  fs = require('fs'),
  path = require('path'),
  request = require('request')

function mkdirsSync(dirname) {
 if (fs.existsSync(dirname)) {
 return true
 } else {
 if (mkdirsSync(path.dirname(dirname))) {
  fs.mkdirSync(dirname)
  return true
 }
 }
}

var snapShotFolerPath = path.join(__dirname, '../snspshot/')
mkdirsSync(snapShotFolerPath)

 function snapShot (taskInfo) {
 return new Promise(function (resolve, reject) {

 (async function(){
  // 啟動Chromium
  const browser = await puppeteer.launch({ignoreHTTPSErrors: true, headless:true, args: ['--no-sandbox']})
  // 打開新頁面
  const page = await browser.newPage()
  // 設置頁面分辨率
  await page.setViewport({width: 1920, height: 1080})

  // 訪問
  await page.goto(taskInfo.websiteUrl, {waitUntil: 'domcontentloaded'}).catch(err => console.log(err))
  await page.waitFor(1000)

  try {
  // 截圖
  await page.screenshot({path: snapShotFolerPath + taskInfo.imageName, fullPage:true}).catch(err => {
   console.log('截圖失敗: ' + err)
  });
  await page.waitFor(6000)
  } catch (e) {
  console.log('failed ' + e)
  } finally {
  await browser.close()

  fs.stat(snapShotFolerPath + taskInfo.imageName, function(err,stats){
   if (err) {
   reject('fail')
   } else {                         
   if (stats.isFile()) {
    resolve('success')
   }
   }
  })
  }

 })()
 })
}

module.exports = snapShot

如何安裝 (Linux 、Unix 操作系統)

如果你有翻墻環境

  • 執行 npm install
  • 執行 npm start

如果你沒有翻墻環境

  • 打開 package.json 文件,檢查 dependencies 項目,如果 key 為 puppeteer 的條目,先刪除該條目。
  • 進入工程命令行,輸入 PUPPETEER_DOWNLOAD_HOST=https://storage.googleapis.co... npm i --save puppeteer
  • 執行 npm install 命令
  • 執行 npm start

流程說明

while 循環去調用接口去獲取當前的截圖任務

  • 在有截圖任務情況下繼續截圖
  • 沒有截任務的情況下,為了避免浪費資源,程序休眠10分鐘后繼續下一次的獲取截圖任務
  • 如果遇到調用截圖任務接口500錯誤,則強制停止截圖任務,相應的服務端工程師去查詢失敗原因

如果有截圖任務那么就去截圖

  • 截圖后將截圖圖片保存到文件夾,命令為當前日期 yyyy-MM-dd-hh-mm-ss-S 格式。然后將結果上傳到服務端
  • 截圖失敗將當前任務結果保存到本地 failedTasks.json 文件夾一份,然后上傳到服務端

截圖成功不管失敗還是成功都去通知服務端。如果失敗將當前任務告訴服務端,如果成功將當前任務信息和截圖成功的絕對路徑告訴服務端

一些說明

Demo 中執行 npm start 真正執行的是 quickStart.js 中的代碼。完整的“獲取截圖任務、截圖、截圖上傳到OSS、失敗則將失敗任務上傳到服務”邏輯在 index.js 文件中

  • 工程是在沒有提供真正的接口獲取任務,而是采用隨機數獲取截圖任務
  • 截圖成功后將結果上傳到OSS這一個步驟是沒有的,采用 log 出來
  • 失敗的上傳也是不存在的,log 打印而已

todoList

  • 多線程高效率的去截圖
  • 一些寫法暫時比較粗糙,不優雅,待改進
  • puppeteer 很強大,大家可以去研究下

代碼地址 (本地下載)

總結

以上就是這篇文章的全部內容了,希望本文的內容對大家的學習或者工作具有一定的參考學習價值,如果有疑問大家可以留言交流,謝謝大家對億速云的支持。

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

城口县| 章丘市| 泸溪县| 富平县| 博野县| 达日县| 平顶山市| 喀喇沁旗| 凤凰县| 鄂托克前旗| 留坝县| 三台县| 余姚市| 武宣县| 平潭县| 安平县| 桂林市| 永济市| 友谊县| 益阳市| 山阳县| 汽车| 定陶县| 柳州市| 广安市| 永登县| 衢州市| 鄯善县| 都昌县| 扎兰屯市| 胶州市| 瑞昌市| 承德县| 大厂| 花莲市| 南和县| 治多县| 岳池县| 凤城市| 宾川县| 丰宁|