利用Node.js批量抓取高清妹子图片实例教程
更新时间：2018年08月02日 10:27:47 作者：ocalhot
这篇文章主要给大家介绍了关于利用Node.js批量抓取高清妹子图片的相关资料，文中通过示例代码介绍的非常详细，需要的朋友们可以直接将代码复制进行使用，下面随着小编来一起学习学习吧
前言
写了一个抓取图片的小玩意，分享一下。
Github地址：https://github.com/focalhot/node.js-crawler （本地下载）
示例代码
//依赖模块
var fs = require('fs');
var request = require("request");
var cheerio = require("cheerio");
var mkdirp = require('mkdirp');
//目标网址
var url = 'http://me2-sex.lofter.com/tag/美女摄影?page=';
//本地存储目录
var dir = './images';
//创建目录
mkdirp(dir, function(err) {
if(err){
console.log(err);
}
});
//发送请求
request(url, function(error, response, body) {
if(!error && response.statusCode == 200) {
var $ = cheerio.load(body);
$('.img img').each(function() {
var src = $(this).attr('src');
console.log('正在下载' + src);
download(src, dir, Math.floor(Math.random()*100000) + src.substr(-4,4));
console.log('下载完成');
});
}
});
//下载方法
var download = function(url, dir, filename){
request.head(url, function(err, res, body){
request(url).pipe(fs.createWriteStream(dir + "/" + filename));
});
};
总结
以上就是这篇文章的全部内容了，希望本文的内容对大家的学习或者工作具有一定的参考学习价值，如果有疑问大家可以留言交流，谢谢大家对脚本之家的支持。
相关文章
这篇文章主要介绍了npm更新命令更新最新版本的实现方式，具有很好的参考价值，希望对大家有所帮助。如有错误或未考虑完全的地方，望不吝赐教2023-06-06
本文主要从源码的角度来讲述 Koa，尤其是其中间件系统是如何实现的。跟 Express 相比，Koa 的源码异常简洁，Express 因为把路由相关的代码嵌入到了主要逻辑中，因此读 Express 的源码可能长时间不得要领，而直接读 Koa 的源码几乎没有什么障碍2022-08-08
这篇文章主要为大家介绍了WebSocket Node构建HTTP隧道实现实例详解,有需要的朋友可以借鉴参考下,希望能够有所帮助,祝大家多多进步,早日升职加薪2023-11-11
这篇文章主要介绍了node模块与npm包管理工具,小编觉得挺不错的，现在分享给大家，也给大家做个参考。一起跟随小编过来看看吧2021-09-09
node.js express安装及示例网站搭建方法(分享)
下面小编就为大家带来一篇node.js express安装及示例网站搭建方法(分享)。小编觉得挺不错的，现在就分享给大家，也给大家做个参考。一起跟随小编过来看看吧2016-08-08
这篇文章主要介绍了nodejs入门教程之express模块用法,结合实例形式分析了express模块的功能、创建、路由相关使用技巧,需要的朋友可以参考下2017-04-04
这篇文章主要介绍了详解基于Koa2开发微信二维码扫码支付相关流程，小编觉得挺不错的，现在分享给大家，也给大家做个参考。一起跟随小编过来看看吧2018-05-05
Express 是一个简洁而灵活的 node.js Web应用框架, 提供了一系列强大特性帮助你创建各种 Web 应用，这篇文章主要介绍了Node.js Express安装与使用教程，非常具有实用价值，需要的朋友可以参考下2018-05-05
nodejs构建本地web测试服务器 如何解决访问静态资源问题
这篇文章主要为大家详细介绍了nodejs构建本地web测试服务器，教大家如何解决访问静态资源问题，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2017-07-07
详解nodejs express下使用redis管理session
本篇文章主要介绍了详解nodejs express下使用redis管理session ，具有一定的参考价值，感兴趣的小伙伴们可以参考一下。2017-04-04
最新评论