Fiddler如何抓取HTTPS协议的网页

Fiddler默认只能抓取HTTP协议的网页,不能抓取HTTPS协议的网页,而我们很多时候,都需要抓HTTPS协议的网页,比如抓淘宝数据等。

打开Fiddler,点击“Tools--Fiddler Options--HTTPS”,把下方的全勾上,如下图所示:

Fiddler如何抓取HTTPS协议的网页

然后,点击Action,选择将CA证书导入到桌面,即第二项,导出后,点击上图的ok保存配置。

Fiddler如何抓取HTTPS协议的网页

然后在桌面上就有了导出的证书,如下所示:

Fiddler如何抓取HTTPS协议的网页

随后,我们可以在浏览器中导入该证书。我们打开火狐浏览器,打开“选项--高级--证书--导入”,选择桌面上的证书,导入即可。随后,Fiddler就可以抓HTTPS协议的网页了。如下图所示。

Fiddler如何抓取HTTPS协议的网页

正常情况下就ok了

打开网页:http://localhost:8888/  点击 

安装证书完成

==============================================================

也有可能会出现creation of the root certificate was not located等错误;

 

需要

在命令行工具中 

cd "d:\Program Files\Fiddler"

makecert.exe -r -ss my -n "CN=DO_NOT_TRUST_FiddlerRoot, O=DO_NOT_TRUST, OU=Created by http://www.fiddler2.com" -sky signature -eku 1.3.6.1.5.5.7.3.1 -h 1 -cy authority -a sha1 -m 120 -b 09/05/2012

如果成功的话

打开网页:http://localhost:8888/  点击 

 =============================================================

抓取https数据失败,全部显示“Tunnel to......443”

按照网络上的教程,设置fiddler开启解密https的选项,同时fiddler的证书也是安装到系统中,但是抓取https的时候总是出现“Tunnel to……443”,如图所示: 
Fiddler如何抓取HTTPS协议的网页解决办法: 
如果你遇到上面的问题,就可能是证书的问题(我的本地证书是用系统生成证书的一个软件生成的个人证书,所以出现了问题),操作步骤如下: 
(1)将之前的证书删除 
打开系统证书管理器(运行=》certmgr.msc=》回车),然后出现管理器
Fiddler如何抓取HTTPS协议的网页 

操作-查找证书,然后输入fiddler查找所有相关证书,

如下所示:

Fiddler如何抓取HTTPS协议的网页

将你之前生成的证书删除即可。 

(2)用一个叫”FiddlerCertMaker.exe“的工具重新打了一个证书。你可以点击下载。(下载成功之后,直接双击运行即可)

http://pan.baidu.com/s/1o8uaVFG 
(3)重新打开fiddler,使用chrome/ie输入”https://www.baidu.com/“,这回可以捕获https的消息并解密成功了。 
(4)使用iOS远程连接fiddler的代理地址,在线安装证书成功后,使用原生浏览器访问“https://www.baidu.com/”,fiddler成功抓取到https的数据。

其他注意事项说明 
(1)chrome和ie使用的是系统代理,而火狐使用的是独立的一套代理系统,所以不管fiddler的开关”capturing“是否打开,都捕获不了火狐浏览器的请求。需要我们将火狐浏览器的代理设置设置为系统代理或者配置为”手工配置代理“ 
(2)火狐浏览器使用的证书管理也是独立的一套系统,而chrome和ie使用的是系统的证书代理,所以我们如果想要使用fiddler抓取火狐浏览器的https的数据包,则需要将fiddler的根证书导出到桌面,然后再导入到firefox的证书中。而我们使用chrome和ie的时候是不需要将证书导入导出的,因为fiddler的证书就安装在系统的证书管理中。 
(3)如果在使用fiddler的过程中证书出现问题,可以尝试使用”FiddlerCertMaker.exe“重新打一下证书 
(4)如果在使用安卓或者ios等出现https抓取不到数据的问题,如果在本机上安装”FiddlerCertMaker.exe”都不行,就尝试一下fiddler的另外一个插件“CertMaker for iOS and Android ”这个插件可以在官方网站上进行下载。具体我也没有使用过。先记录下思路。

 

转载于:https://my.oschina.net/yves175/blog/823567