更多>>关于我们
西安鲲之鹏网络信息技术有限公司从2010年开始专注于Web(网站)数据抓取领域。致力于为广大中国客户提供准确、快捷的数据采集相关服务。我们采用分布式系统架构,日采集网页数千万。我们拥有海量稳定高匿HTTP代理IP地址池,可以有效获取互联网任何公开可见信息。
您只需告诉我们您想抓取的网站是什么,您感兴趣的字段有哪些,你需要的数据是哪种格式,我们将为您做所有的工作,最后把数据(或程序)交付给你。
数据的格式可以是CSV、JSON、XML、ACCESS、SQLITE、MSSQL、MYSQL等等。
更多>>技术文章
Fiddler支持自定义规则,可以实现对HTTP请求数据发送给Server前或HTTP应答数据发送给浏览器前进行修改。
下面的例子将演示如何向所有HTTP请求数据中增加一个头。
1)打开Fiddler,点击Rules > Customize Rules。会提示安装Fiddler ScriptEditor。
2)打开安装好的Fiddler ScriptEditor,找到 OnBeforeRequest()方法。
3)在 OnBeforeRequest()中加入如下代码,保存即可。
oSession.oRequest["X-Forwarded-For"] = "1.2.3.4";
上述代码将实现向所有HTTP请求中插入X-Forwarded-For头(值为1.2.3.4)。
效果如下:
PS:某些网站在验证客户端IP上存在Bug,导致我们可以利用X-Forwarded-For来伪造访问者IP。
Fiddler Document - Modifying a Request or Response >>> http://docs.telerik.com/fiddler/KnowledgeBase/FiddlerScript/ModifyRequestOrResponse