Python网络爬虫: Window 下配置ChromeDriver以及浏览器抓取数据

下载谷歌驱动地址   

http://npm.taobao.org/mirrors/chromedriver/

Python网络爬虫: Window 下配置ChromeDriver以及浏览器抓取数据

 

把上文提到的Chromedriver.exe文件再复制到python的安装目录C:\Python27和C:\Python27\Scripts下(这部分配置与第一部分不冲突,不需要对Chrome浏览器进行更改),并把C:\Python27和C:\Python27\Scripts都配置进环境变量。一般安装python时C:\Python27已经配置了环境变量,安装pip时C:\Python27\Scripts也已经配置了环境变量,所以一般不需要多做修改。

最后就能用模拟浏览器进行爬取

Python网络爬虫: Window 下配置ChromeDriver以及浏览器抓取数据