利用Node.js批量抓取高清妹子图片实例教程
更新时间：2018年08月02日 10:27:47 作者：ocalhot
这篇文章主要给大家介绍了关于利用Node.js批量抓取高清妹子图片的相关资料，文中通过示例代码介绍的非常详细，需要的朋友们可以直接将代码复制进行使用，下面随着小编来一起学习学习吧
前言
写了一个抓取图片的小玩意，分享一下。
Github地址：https://github.com/focalhot/node.js-crawler （本地下载）
示例代码
//依赖模块
var fs = require('fs');
var request = require("request");
var cheerio = require("cheerio");
var mkdirp = require('mkdirp');
//目标网址
var url = 'http://me2-sex.lofter.com/tag/美女摄影?page=';
//本地存储目录
var dir = './images';
//创建目录
mkdirp(dir, function(err) {
if(err){
console.log(err);
}
});
//发送请求
request(url, function(error, response, body) {
if(!error && response.statusCode == 200) {
var $ = cheerio.load(body);
$('.img img').each(function() {
var src = $(this).attr('src');
console.log('正在下载' + src);
download(src, dir, Math.floor(Math.random()*100000) + src.substr(-4,4));
console.log('下载完成');
});
}
});
//下载方法
var download = function(url, dir, filename){
request.head(url, function(err, res, body){
request(url).pipe(fs.createWriteStream(dir + "/" + filename));
});
};
总结
以上就是这篇文章的全部内容了，希望本文的内容对大家的学习或者工作具有一定的参考学习价值，如果有疑问大家可以留言交流，谢谢大家对脚本之家的支持。
相关文章
今天小编就为大家分享一篇NodeJs搭建本地服务器之使用手机访问的实例讲解，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2018-05-05
nodejs最大的优势也是大家用着最为难以理解的一点,就是它的异步功能,它几乎所有的io操作都是异步的,这也就导致很多人不理解也用不习惯,下面这篇文章主要给大家介绍了关于Node.js查询MySQL并返回结果集给客户端的相关资料,需要的朋友可以参考下2022-12-12
今天小编就为大家分享一篇修改node.js默认的npm安装目录实例，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2018-05-05
这篇文章主要介绍了package.json文件配置详解，具有一定的参考价值，感兴趣的小伙伴们可以参考一下。2017-06-06
本文主要介绍了安装node-sass的方法步骤，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧2023-05-05
Egret基于TypeScript开发的，而TypeScript编译工具tsc是基于Node.js 开发的。所以在安装过程中，我们先需要对于基础支持工具进行安装。2014-07-07
这篇文章主要介绍了使用node打造自己的命令行工具方法教程，小编觉得挺不错的，现在分享给大家，也给大家做个参考。一起跟随小编过来看看吧2018-03-03
解决npm install版本不匹配问题: npm ERR! code ETARGET npm ERR!
这篇文章主要介绍了如何解决npm install版本不匹配问题: npm ERR! code ETARGET npm ERR! notarget No matching version found for,文中给出了详细的解决方法,需要的朋友可以参考下2024-02-02
node.js中的http.response.getHeader方法使用说明
这篇文章主要介绍了node.js中的http.response.getHeader方法使用说明,本文介绍了http.response.getHeader的方法说明、语法、接收参数、使用实例和实现源码,需要的朋友可以参考下2014-12-12
Nodejs中调用系统命令、Shell脚本和Python脚本的方法和实例
这篇文章主要介绍了Nodejs中调用系统命令、Shell脚本和Python脚本的方法和实例,本文给出了利用子进程调用系统命令、执行系统命令、调用传参数的shell脚本、调用python脚本的例子,需要的朋友可以参考下2015-01-01
最新评论