04-爬虫利器Fiddler

梦里梦外; 2022-12-08 15:30 134阅读 0赞

Fiddler不但能截获各种浏览器发出的HTTP请求, **也可以截获各种智能手机发出的HTTP/HTTPS请求。**

Fiddler能捕获IOS设备发出的请求，比如IPhone, IPad, MacBook. 等等苹果的设备。

同理，也可以截获Andriod，Windows Phone的等设备发出的HTTP/HTTPS。

## 工作原理 ##

Fiddler 是以web服务器的形式工作的，它使用地址:127.0.0.1，端口:8888。

![c90b40474e58c9a45e31d9cd937398a1.png][]

### Fiddler抓取HTTPS设置 ###

**启动Fiddler，**打开菜单栏中的 Tools > Fiddler Options，打开“Fiddler Options”对话框。

![8be9a933cb4f52a44930726c3cdacee5.png][]

**对Fiddler进行设置**：打开工具栏->Tools->Fiddler Options->HTTPS

![db03d3f53188e7ec0e6175d61bb4a8a3.png][]

选中Capture HTTPS CONNECTs，因为我们要用Fiddler获取手机客户端发出的HTTPS请求，所以中间的下拉菜单中选中**from remote clients only。**选中下方Ignore server certificate errors.

![3e5be22794cc8c5d92ef5c2e7b88519b.png][]

**配置Fiddler允许远程连接**

Fiddler 主菜单 Tools -> Fiddler Options…-> Connections页签，选中Allow remote computers to connect。

![ac69cf134259b736e15ff15db757f296.png][]

重启Fidler（这一步很重要，必须做）。

## ##

### Fiddler 如何捕获Chrome的会话 ###

*  switchyomega安装插件

打开chrome应用商店

![a8bd6cc6b0fbdbe17888fae8921a1e2a.png][]

点击 深蓝色字体“添加至CHROME”

![16145cb4fc3c7d805ed1a26e2e85192c.png][]

### Fiddler 如何捕获Firefox的会话 ###

能支持HTTP代理的任意程序的数据包都能被Fiddler嗅探到，Fiddler的运行机制其实就是本机上监听8888端口的HTTP代理。Fiddler2启动的时候默认IE的代理设为了127.0.0.1:8888，而其他浏览器是需要手动设置的，所以将Firefox的代理改为127.0.0.1:8888就可以监听数据了。Firefox 上通过如下步骤设置代理点击: Tools -> Options, 在Options 对话框上点击Advanced tab - > network tab -> setting.

## Fiddler如何捕获HTTPS会话 ##

默认下，Fiddler不会捕获HTTPS会话，需要你设置下， 打开Fiddler Tool->Fiddler Options->HTTPS tab

![73bfa35e67197711bc82b74625cf195f.png][]

选中checkbox， 弹出如下的对话框，点击"YES"

![aa8beb00d59ce93aabe9d8ddc8fa5786.png][]

![8340edf1befc984f95de3018d0848491.png][]

点击"Yes" 后，就设置好了。

### Fiddler的基本界面 ###

看看Fiddler的基本界面

![d6389cdf1df731fef8cc619852360389.png][]

特别注意：遇到这个Click请点击Click![6695e97556c0e3acef049dcec225f277.png][]

## Fiddler强大的Script系统 ##

Fiddler包含了一个强大的基于事件脚本的子系统，并且能使用.net语言进行扩展。官方的帮助文档:

http://www.fiddler2.com/Fiddler/dev/ScriptSamples.asp

首先先安装SyntaxView插件，Inspectors tab->Get SyntaxView tab->Download and Install SyntaxView Now… 如下图

![eadc2f6d06cf443a91eb64ad1686cf12.png][]

安装成功后Fiddler 就会多了一个Fiddler Script tab，如下图：

![83d2a1e5606a97da58449f4e3c3dbc60.png][]

在里面我们就可以编写脚本了， 看个实例让所有cnblogs的会话都显示红色。把这段脚本放在OnBeforeRequest(oSession: Session) 方法下，并且点击"Save script"

if(oSession.HostnameIs("www.cnblogs.com")){
    
    　　oSession["ui-color"]="red";
    
    }

这样所有的cnblogs的会话都会显示红色。

# 使用fiddler抓取安卓模拟器包 #

如图1所示，先设置好提琴手

**配置路径**：工具 - > Fiddler选项 - > HTTPS - >三个选项全部勾选

如下图所示：

重启软件

![70f0dc838b1fc8b917689dfff2f40380.png][]

2配置模拟器

长按WLAN信号，点击修改网络

![d79f8ab8919d17dfa6b6e0e57b1a99c4.png][]

点击显示高级，选择手动代理

![1ab4c9b364084f2da3e2c12417d2294a.png][]

IP写上自己电脑的IP，端口号写上提琴手的端口，默认是8888

![8a13aa67f71dcbb3358d1833b1c8991d.png][]

![016e1f6ae917aeec2e623c43f1a701ed.png][]

这是你打开浏览器会说安全证书的问题

你再模拟器上输入ip：port我的就是192.168.222.1:8888

这时候下面会有个安装证书的连接，随便起个名字，就好了

--------------------

<table> 
 <tbody> 
  <tr> 
   <td> <p><img alt="" height="102" src="https://img-blog.csdnimg.cn/img_convert/9d33579c1dcd8bd81044937288066036.png" width="102"></p> <p>IT入门&nbsp;感谢关注</p> </td> 
   <td> <p>&nbsp;</p> &nbsp; <p>练习地址：<a href="http://www.520mg.com/it" rel="nofollow">www.520mg.com/it</a></p> <p><a href="https://blog.csdn.net/bigzql/category_10279338.html" rel="nofollow">0基础python爬虫系列教程</a></p> <p>&nbsp;</p> </td> 
  </tr> 
 </tbody> 
</table>

[c90b40474e58c9a45e31d9cd937398a1.png]: /images/20221123/94aceb6f03984882b621f744a8f4f0ac.png
[8be9a933cb4f52a44930726c3cdacee5.png]: /images/20221123/6abafed235b049b2ae290ee92a76bfb9.png
[db03d3f53188e7ec0e6175d61bb4a8a3.png]: /images/20221123/7bedc6569b2d4b338af79d18a793794f.png
[3e5be22794cc8c5d92ef5c2e7b88519b.png]: /images/20221123/0ab482d43a7a40d58a3237a369307f79.png
[ac69cf134259b736e15ff15db757f296.png]: /images/20221123/f1be09ab58e5452f815d8222c35459a3.png
[a8bd6cc6b0fbdbe17888fae8921a1e2a.png]: /images/20221123/90c99c18ac8b448a9737ae6f78a5df57.png
[16145cb4fc3c7d805ed1a26e2e85192c.png]: /images/20221123/bb7fc9ce3825495e8f63cfd1102e6fc5.png
[73bfa35e67197711bc82b74625cf195f.png]: /images/20221123/0a515d8e924242b79f818bfd9e644a60.png
[aa8beb00d59ce93aabe9d8ddc8fa5786.png]: /images/20221123/248730100a5b4140a64c32f0b7751015.png
[8340edf1befc984f95de3018d0848491.png]: /images/20221123/4d49adebc79646c1a7a0c9e62a20079e.png
[d6389cdf1df731fef8cc619852360389.png]: /images/20221123/7a6248aabc5e448aaa4f7c624fe00097.png
[6695e97556c0e3acef049dcec225f277.png]: /images/20221123/b0b89683c91845b99105df3dff990868.png
[eadc2f6d06cf443a91eb64ad1686cf12.png]: /images/20221123/c67240cffb2b47199b911d3ab58162e0.png
[83d2a1e5606a97da58449f4e3c3dbc60.png]: /images/20221123/672dcfd4cfe947cab3d063ac63eb310e.png
[70f0dc838b1fc8b917689dfff2f40380.png]: /images/20221123/bd60e675bedf49d59cb085ccfc5300b0.png
[d79f8ab8919d17dfa6b6e0e57b1a99c4.png]: /images/20221123/8f8363b8f1634ad095348825a992a57c.png
[1ab4c9b364084f2da3e2c12417d2294a.png]: /images/20221123/5c90bba8fb2647babc516a72442a2466.png
[8a13aa67f71dcbb3358d1833b1c8991d.png]: /images/20221123/7ca0b648e0854f8ebe06039c1f16f126.png
[016e1f6ae917aeec2e623c43f1a701ed.png]: /images/20221123/780536af875a496ea2c4cf2d28bb86ab.png