利用Node.js批量抓取高清妹子图片实例教程
更新时间：2018年08月02日 10:27:47 作者：ocalhot
这篇文章主要给大家介绍了关于利用Node.js批量抓取高清妹子图片的相关资料，文中通过示例代码介绍的非常详细，需要的朋友们可以直接将代码复制进行使用，下面随着小编来一起学习学习吧
前言
写了一个抓取图片的小玩意，分享一下。
Github地址：https://github.com/focalhot/node.js-crawler （本地下载）
示例代码
//依赖模块
var fs = require('fs');
var request = require("request");
var cheerio = require("cheerio");
var mkdirp = require('mkdirp');
//目标网址
var url = 'http://me2-sex.lofter.com/tag/美女摄影?page=';
//本地存储目录
var dir = './images';
//创建目录
mkdirp(dir, function(err) {
if(err){
console.log(err);
}
});
//发送请求
request(url, function(error, response, body) {
if(!error && response.statusCode == 200) {
var $ = cheerio.load(body);
$('.img img').each(function() {
var src = $(this).attr('src');
console.log('正在下载' + src);
download(src, dir, Math.floor(Math.random()*100000) + src.substr(-4,4));
console.log('下载完成');
});
}
});
//下载方法
var download = function(url, dir, filename){
request.head(url, function(err, res, body){
request(url).pipe(fs.createWriteStream(dir + "/" + filename));
});
};
总结
以上就是这篇文章的全部内容了，希望本文的内容对大家的学习或者工作具有一定的参考学习价值，如果有疑问大家可以留言交流，谢谢大家对脚本之家的支持。
相关文章
Node Mongoose用法详解【Mongoose使用、Schema、对象、model文档等】
这篇文章主要介绍了Node Mongoose用法,结合实例形式分析了Mongoose使用、Schema、对象、model文档等基本原理、用法及操作注意事项,需要的朋友可以参考下2020-05-05
我们常使用nvm来管理node.js的版本,这样就可以根据自己的需要来回切换node.js版本,下面这篇文章主要给大家介绍了关于node版本过高该如何将node版本降低的相关资料,需要的朋友可以参考下2023-01-01
有段时间没用npm了，新建个项目，需要改变npm全局包默认安装的路径，本文就来介绍一下node自定义安装更改npm全局模块默认安装路径的步骤，感兴趣的可以了解下2021-09-09
nodejs redis 发布订阅机制封装实现方法及实例代码
这篇文章主要介绍了nodejs redis 发布订阅机制封装的相关资料，这里提供了实现方法，及实例代码，具有参考价值，需要的朋友可以参考下2016-12-12
nodejs 使用http进行post或get请求的实例(携带cookie)
今天小编就为大家分享一篇nodejs 使用http进行post或get请求的实例(携带cookie)，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2019-01-01
npm install XXX安装路径文件夹权限问题的解决过程
这篇文章主要给大家介绍了关于npm install XXX安装路径文件夹权限问题(npm ERR! The operation was rejected by your operating system.errno -4080)的解决过程,文中通过图文介绍的非常详细,需要的朋友可以参考下2023-04-04
这篇文章主要介绍了关于Node.js中的JXcore打包示例,JXcore 是一个支持多线程的 Node.js 发行版本，基本不需要对你现有的代码做任何改动就可以直接线程安全地以多线程运行,需要的朋友可以参考下2023-05-05
这篇文章主要为大家介绍了Postman xmysql不切换环境缓存数据到本地示例详解，有需要的朋友可以借鉴参考下，希望能够有所帮助，祝大家多多进步，早日升职加薪2023-02-02
这篇文章主要介绍了Vue+Node实现的商城用户管理功能,结合实例形式详细分析了商城用户管理的前台登录、校验、跳转、退出等相关操作技巧,需要的朋友可以参考下2019-12-12
这篇文章主要介绍了Node中完整的node addon实现流程，文章围绕主题展开详细的内容介绍，具有一定的参考价值，需要的小伙伴可以参考一下2022-09-09
最新评论