Python3.5抓取代理IP并验证有效性

网上有很多的免费代理IP网站,但不是所有的ip都能用,正好自己正在研究,记录一下如何爬取可用的代理IP。
这里以xici代理IP为例:http://www.xicidaili.com/nn/1
Python3.5抓取代理IP并验证有效性
Python3.5抓取代理IP并验证有效性
Python3.5抓取代理IP并验证有效性
Python3.5抓取代理IP并验证有效性
Python3.5抓取代理IP并验证有效性
=================================更新===========================
代理有效性不能看是否访问成功,这里使用到了自己的云服务器新建脚本index.php
Python3.5抓取代理IP并验证有效性
相应代码也做了修改,果然不行了,233,xici不靠谱
Python3.5抓取代理IP并验证有效性

更新同步到github了~