python虚拟环境virtualenv下建爬虫项目

1.cd到你想建虚拟环境的目录,然后执行命令:mkvirtualenv --python 选你安装的python路径\python.exe 你的项目名称,例如我的如下图所示。

python虚拟环境virtualenv下建爬虫项目
2.然后安装scrapy,使用豆瓣源的镜像来加速安装,使用命令:pip install -i https://pypi.douban.com/simple/ scrapy。如下图所示。如果你出现因缺少Twisted报错,此时就去下载然后安装,如下图所示。

python虚拟环境virtualenv下建爬虫项目

然后再安装scrapy,就安装成功了。今后安装的方式都和scrapy类似。

3.接下来deactivate退出虚拟环境,cd到自己想把项目建到那个目录的路径,然后workon进入虚拟环境。然后用scrapy建项目工程。如下图所示。

python虚拟环境virtualenv下建爬虫项目

4.然后创建一个blog.jobbole.com,如下图。

python虚拟环境virtualenv下建爬虫项目