windows下搭建python scrapy爬虫框架步骤
更新时间：2018年12月23日 11:04:13 投稿：laozhang
在本文内容里小编给大家分享的是关于windows下搭建python scrapy爬虫框架的教学内容，需要的朋友们学习下。
网络上现有的windows下搭建scrapy教程都比较旧，一般都是咔咔咔安装一堆软件，太麻烦，这是因为scrapy框架用到好多不同的模块，其实查阅最新的官网scrapy文档，在windows下搭建scrapy框架，官方文档是建议使用集成包的，以免安装太过复杂而出现问题，首先百度scrapy，就可以找到scrapy的官方文档
1、找到windows下的框架安装的文档教程，这里建议我们安装Anaconda或者Miniconda集成包，下面我选择安装Miniconda安装包来安装scrapy框架
2、百度Miniconda python集成安装包，根据自己的python版本和windows版本选择对应的安装包下载即可
3、下载完成后进入安装界面，全程下一步即可
4、在cmd窗口中用conda list 命令检验conda是否安装成功
5、如果检验命令无效，检查下环境变量里是否有正确的读取路径，如果还是不行，尝试重新安装
6、使用 conda install -c conda-forge scrapy 命令安装scrapy框架
7、等待框架的各个组件下载安装完成，安装界面很炫酷哦等待框架的各个组件下载安装完成，安装界面很炫酷哦
8、最后一步，使用 scrapy startproject tutorial 命令生成scrapy爬虫模版，然后就可以根据文档对scrapy爬虫模版进行改写来完成我们自己的网络爬虫了，大功告成！！！
总结：以上就是关于在WIN下安装python爬虫框架的步骤教学，感谢大家的阅读和对脚本之家的支持。
相关文章
今天小编就为大家分享一篇python实现判断一个字符串是否是合法IP地址的示例，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2018-06-06
这篇文章主要介绍了Python的venv虚拟环境使用及说明,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教2025-03-03
这篇文章主要为大家详细介绍了python实现批量图片格式转换的方法，文中示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2018-06-06
这篇文章主要介绍了win7上python2.7连接mysql数据库的方法,小编觉得挺不错的，现在分享给大家，也给大家做个参考。一起跟随小编过来看看吧2017-01-01
本文主要介绍了Numpy对于NaN值的判断方法，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧2023-02-02
python常用request库与lxml库操作方法整理总结
一路学习，一路总结，技术就是这样，应用之后，在进行整理，才可以加深印象。本篇文字为小节篇，核心总结 requests 库与 lxml 库常用的操作2021-08-08
模板引擎是Web开发框架中负责前端展示的关键,这里我们就来以实例深入解析Python的Tornado框架中内置的模板引擎,来学习如何编写Tonardo的模板.2016-07-07
这篇文章主要为大家详细介绍了Python如何结合PyQt手搓一个简单的记事本,文中的示例代码简洁易懂,感兴趣的小伙伴可以跟随小编一起学习一下2025-02-02
今天小编就为大家分享一篇浅谈tensorflow之内存暴涨问题，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2020-02-02
本篇文章主要介绍基于python的七种经典排序算法（推荐），具有一定的参考价值，这里整理了详细的代码,有需要的小伙伴可以参考下。2016-12-12
最新评论