Mac环境下使用pycharm成功安装Scrapy爬虫框架
在网上搜了好多关于Mac环境下安装Scrapy框架的文章,要么尝试还是失败,要么安装过程繁琐,而且也没有详细介绍使用pycharm安装的方法。通过踩坑,终于发现使用pycharm安装Scrapy的成功方法。
首先介绍一下安装环境:
- 系统版本:macOS High Sierra 10.13.6
- Python环境:3.7
- 安装工具:pycharm 2019.2.5
安装步骤:
1.打开pycharm后,点击左上角pycharm菜单,选择preferences...
2.点击project:Python中的project interpreter,然后点击下方的‘+’号
3.安装Scrapy所需的相关依赖包
在跳出的窗口中搜索Scrapy的相关依赖包,按照如下顺序安装所需的依赖包:
zope-interface --> pyopenssl --> lxml --> twisted --> scrapy
前面三个包都正常安装,等到安装twisted包的时候出错,提示:
distutils.errors.DistutilsError: Could not find suitable distribution for Requirement....
不要着急,此时中断一下,再用pycharm搜索装一个incremental,提示incremental安装成功。此时再安装twisted,就能安装成功啦。
之后再安装scrapy包,也提示安装成功。
就此scrapy安装成功,可以使用啦!