利用Node.js批量抓取高清妹子圖片實例教程
更新時間：2018年08月02日 10:27:47 作者：ocalhot
這篇文章主要給大家介紹了關于利用Node.js批量抓取高清妹子圖片的相關資料，文中通過示例代碼介紹的非常詳細，需要的朋友們可以直接將代碼復制進行使用，下面隨著小編來一起學習學習吧
前言
寫了一個抓取圖片的小玩意，分享一下。
Github地址：https://github.com/focalhot/node.js-crawler （本地下載）
示例代碼
//依賴模塊
var fs = require('fs');
var request = require("request");
var cheerio = require("cheerio");
var mkdirp = require('mkdirp');
//目標網(wǎng)址
var url = 'http://me2-sex.lofter.com/tag/美女攝影?page=';
//本地存儲目錄
var dir = './images';
//創(chuàng)建目錄
mkdirp(dir, function(err) {
if(err){
console.log(err);
}
});
//發(fā)送請求
request(url, function(error, response, body) {
if(!error && response.statusCode == 200) {
var $ = cheerio.load(body);
$('.img img').each(function() {
var src = $(this).attr('src');
console.log('正在下載' + src);
download(src, dir, Math.floor(Math.random()*100000) + src.substr(-4,4));
console.log('下載完成');
});
}
});
//下載方法
var download = function(url, dir, filename){
request.head(url, function(err, res, body){
request(url).pipe(fs.createWriteStream(dir + "/" + filename));
});
};
總結
以上就是這篇文章的全部內(nèi)容了，希望本文的內(nèi)容對大家的學習或者工作具有一定的參考學習價值，如果有疑問大家可以留言交流，謝謝大家對腳本之家的支持。
相關文章
Node Mongoose用法詳解【Mongoose使用、Schema、對象、model文檔等】
這篇文章主要介紹了Node Mongoose用法,結合實例形式分析了Mongoose使用、Schema、對象、model文檔等基本原理、用法及操作注意事項,需要的朋友可以參考下2020-05-05
我們常使用nvm來管理node.js的版本,這樣就可以根據(jù)自己的需要來回切換node.js版本,下面這篇文章主要給大家介紹了關于node版本過高該如何將node版本降低的相關資料,需要的朋友可以參考下2023-01-01
有段時間沒用npm了，新建個項目，需要改變npm全局包默認安裝的路徑，本文就來介紹一下node自定義安裝更改npm全局模塊默認安裝路徑的步驟，感興趣的可以了解下2021-09-09
nodejs redis 發(fā)布訂閱機制封裝實現(xiàn)方法及實例代碼
這篇文章主要介紹了nodejs redis 發(fā)布訂閱機制封裝的相關資料，這里提供了實現(xiàn)方法，及實例代碼，具有參考價值，需要的朋友可以參考下2016-12-12
nodejs 使用http進行post或get請求的實例(攜帶cookie)
今天小編就為大家分享一篇nodejs 使用http進行post或get請求的實例(攜帶cookie)，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2019-01-01
npm?install?XXX安裝路徑文件夾權限問題的解決過程
這篇文章主要給大家介紹了關于npm?install?XXX安裝路徑文件夾權限問題(npm?ERR!?The?operation?was?rejected?by?your?operating?system.errno?-4080)的解決過程,文中通過圖文介紹的非常詳細,需要的朋友可以參考下2023-04-04
這篇文章主要介紹了關于Node.js中的JXcore打包示例,JXcore 是一個支持多線程的 Node.js 發(fā)行版本，基本不需要對你現(xiàn)有的代碼做任何改動就可以直接線程安全地以多線程運行,需要的朋友可以參考下2023-05-05
Postman xmysql不切換環(huán)境緩存數(shù)據(jù)到本地
這篇文章主要為大家介紹了Postman xmysql不切換環(huán)境緩存數(shù)據(jù)到本地示例詳解，有需要的朋友可以借鑒參考下，希望能夠有所幫助，祝大家多多進步，早日升職加薪2023-02-02
這篇文章主要介紹了Vue+Node實現(xiàn)的商城用戶管理功能,結合實例形式詳細分析了商城用戶管理的前臺登錄、校驗、跳轉、退出等相關操作技巧,需要的朋友可以參考下2019-12-12
Node中完整的?node?addon?實現(xiàn)流程
這篇文章主要介紹了Node中完整的node?addon實現(xiàn)流程，文章圍繞主題展開詳細的內(nèi)容介紹，具有一定的參考價值，需要的小伙伴可以參考一下2022-09-09