Python-scrapy框架的安装(环境python3.6与2.7共存)
安装python-scrapy框架得有python环境,官网:https://www.python.org/
https://www.python.org/ftp/python/
一:windows系统
若以下方式不行,在 https://www.lfd.uci.edu/~gohlke/pythonlibs/ 网站上下载 所需的whl文件。
1、以管理员模式打开命令行,执行pip install wheel,这是在线安装。
可能出现的错误:命令无法实施,可改为python -m pip install wheel; 如果是环境变量未添加,添加后必须重开命令行;或者是双环境,则需要去除其中一个得pip文件;最后是pip版本过低,按提示升级。
2、执行pip install twiste 安装twiste
出现问题如下,可能是python国外网络的问题,这时我用国内的镜像源来加速。
pip install 包名 -i http://pypi.douban.com/simple/ --trusted-host pypi.douban.com
(这个是豆瓣源)
--trusted-host pypi.douban.com 这是为了获得ssl证书的认证,不然会报错
没得办法,去网站下载
应该是这两个,稳妥一点都下载,下载后在命令窗口里转到下载的文件夹,开始安装:
如此,总算完成twiste的安装
3、第三个包是lxml:pip install lxml
4、安装scrapy:pip install scrapy
如此一来,大功告成!
二 :Linux系统
只需pip install scrapy就可以,如果缺少包,就去网站下载。
三:Win10下python 2.7与python 3.6双环境共存
https://baijiahao.baidu.com/s?id=1607774325597619048&wfr=spider&for=pc