Scrapy在windows下的安装流程

Scrapy的安装方法1:

1.直接使用pip install scrapy安装,不成功可以安装whl格式的包.

2.首先下载scrapy的whl包
下载地址:http://www.lfd.uci.edu/~gohlke/pythonlibs/

3.在网页中搜索twisted找到其对应的whl包并下载Scrapy在windows下的安装流程
注:这里是我下载好的包,下载时注意根据你的Python的版本选择合适的包,名称中间的cp36是python3.6的意思,amd64是python的位数
4.下载完成后使用cmd打开windows的命令行窗口执行pip install +包的名字(直接拉到终端按回车键即可)
Scrapy在windows下的安装流程
5.测试scrapy是否安装成功,在终端中直接输入scrapy,如果安装成功会显示如下图:
Scrapy在windows下的安装流程
Scrapy的安装方法2
直接在终端输入 conda install scrapy即可Scrapy在windows下的安装流程
测试是否安装成功跟方法1一样
Scrapy的使用
1.打开终端选择项目所在文件的路径(这里我是在桌面上创建的)
Scrapy在windows下的安装流程
2.在路径下创建爬虫文件的名称:
scrapy startproject “文件名称”
Scrapy在windows下的安装流程
3.创建爬虫项目
用pycharm打开刚才所建的文件夹,在pycharm的终端输入scrapy genspider “项目名称” *.com(域名)
Scrapy在windows下的安装流程
4.创建后目录结构下spiders文件夹会出现所创建的项目Scrapy在windows下的安装流程
然后就没有然后了