2014-09-14 22:24:09 +08:00
|
|
|
|
使用Linux命令行嗅探HTTP流量
|
2014-09-14 11:04:39 +08:00
|
|
|
|
================================================================================
|
2014-09-19 22:34:12 +08:00
|
|
|
|
假设由于某种原因,你需要嗅探HTTP站点的流量(如HTTP请求与响应)。举个例子,你可能在测试一个web服务器的实验性功能,或者 你在为某个web应用或RESTful服务排错,又或者你正在为PAC排错或寻找某个站点下载的恶意软件。不论什么原因,在这些情况下,进行HTTP流量嗅探对于系统管理、开发者、甚至最终用户来说都是很有帮助的。
|
2014-09-14 11:04:39 +08:00
|
|
|
|
|
2014-09-19 22:34:12 +08:00
|
|
|
|
数据包嗅工具tcpdump被广泛用于实时数据包的导出,但是你需要设置过滤规则来捕获HTTP流量,甚至它的原始输出通常不能方便的停 在HTTP协议层。实时web服务器日志解析器如[ngxtop][3]提供可读的实时web流量跟踪痕迹,但这仅适用于可完全访问live web服务器日志的情况。
|
2014-09-14 22:24:09 +08:00
|
|
|
|
|
2014-09-19 22:34:12 +08:00
|
|
|
|
要是有一个仅用于抓取HTTP流量的类tcpdump的数据包嗅探工具就非常好了。事实上,[httpry][4]就是:**HTTP包嗅探工具**。httpry捕获HTTP数据包,并且将HTTP协议层的数据内容以可读形式列举出来。通过这篇指文章,让我们了解如何使用httpry工具嗅探HTTP流 量。
|
2014-09-14 22:24:09 +08:00
|
|
|
|
|
|
|
|
|
###在Linux上安装httpry###
|
|
|
|
|
|
2014-09-19 22:34:12 +08:00
|
|
|
|
在基于Debian系统(Ubuntu 或 LinuxMint),基础仓库中没有httpry安装包(译者注:本人ubuntu14.04,仓库中已有包,可直接安装)。所以我们需要通过源码安装:
|
2014-09-14 22:24:09 +08:00
|
|
|
|
|
|
|
|
|
$ sudo apt-get install gcc make git libpcap0.8-dev
|
|
|
|
|
$ git clone https://github.com/jbittel/httpry.git
|
|
|
|
|
$ cd httpry
|
|
|
|
|
$ make
|
|
|
|
|
$ sudo make install
|
|
|
|
|
|
|
|
|
|
在Fedora,CentOS 或 RHEL系统,可以使用如下yum命令安装httpry。在CentOS/RHEL系统上,运行yum之前使能[EPEL repo][5]。
|
|
|
|
|
|
|
|
|
|
$ sudo yum install httpry
|
|
|
|
|
|
|
|
|
|
如果逆向通过源码来构httpry的话,你可以通过这几个步骤实现:
|
|
|
|
|
|
|
|
|
|
$ sudo yum install gcc make git libpcap-devel
|
|
|
|
|
$ git clone https://github.com/jbittel/httpry.git
|
|
|
|
|
$ cd httpry
|
|
|
|
|
$ make
|
|
|
|
|
$ sudo make install
|
|
|
|
|
|
|
|
|
|
###httpry的基本用法###
|
|
|
|
|
|
2014-09-19 22:34:12 +08:00
|
|
|
|
以下是httpry的基本用法
|
|
|
|
|
|
|
|
|
|
$ sudo httpry -i <network-interface>
|
|
|
|
|
|
|
|
|
|
httpry就会监听指定的网络接口,并且实时的显示捕获到的HTTP 请求/响。
|
|
|
|
|
|
|
|
|
|
![](https://farm4.staticflickr.com/3883/14985851635_7b94787c6d_z.jpg)
|
|
|
|
|
|
|
|
|
|
在大多数情况下,由于发送与接到的数据包过多导致刷屏很快,难以分析。这时候你肯定想将捕获到的数据包保存下来以离线分析。可以使用'b'或'-o'选项保存数据包。'-b'选项将数据包以二进制文件的形式保存下来,这样可以使用httpry软件打开文件以浏览。另 一方面,'-o'选项将数据以可读的字符文件形式保存下来。
|
|
|
|
|
|
|
|
|
|
以二进制形式保存文件:
|
|
|
|
|
|
|
|
|
|
$ sudo httpry -i eth0 -b output.dump
|
|
|
|
|
|
|
|
|
|
浏览所保存的HTTP数据包文件:
|
|
|
|
|
|
|
|
|
|
$ httpry -r output.dump
|
|
|
|
|
|
|
|
|
|
注意,不需要根用户权限就可以使用'-r'选项读取数据文件。
|
|
|
|
|
|
|
|
|
|
将httpry数据以字符文件保存:
|
|
|
|
|
|
|
|
|
|
$ sudo httpry -i eth0 -o output.txt
|
|
|
|
|
|
|
|
|
|
###httpry 的高级应用###
|
|
|
|
|
|
|
|
|
|
如果你想监视指定的HTTP方法(如:GET,POST,PUT,HEAD,CONNECT等),使用'-m'选项:
|
|
|
|
|
|
|
|
|
|
$ sudo httpry -i eth0 -m get,head
|
|
|
|
|
|
|
|
|
|
![](https://farm6.staticflickr.com/5551/14799184220_3b449d422c_z.jpg)
|
|
|
|
|
|
|
|
|
|
如果你下载了httpry的源码,你会发现源码下有一系Perl脚本,这些脚本用于分析httpry输出。脚本位于目录httpry/scripts/plugins。如果你想写一个定制的httpry输出分析器,则这些脚可以作为很好的例子。其中一些有如下的功能:
|
|
|
|
|
|
|
|
|
|
- **hostnames**: 显示唯一主机名列表.
|
|
|
|
|
- **find_proxies**: 探测web代理.
|
|
|
|
|
- **search_terms**: 查找及计算输入检索服务的检索词。
|
|
|
|
|
- **content_analysis**: 查找含有指定关键的URL。
|
|
|
|
|
- **xml_output**: 将输出转换为XML形式。
|
|
|
|
|
- **log_summary**: 生成日志摘要。
|
|
|
|
|
- **db_dump**: 将日志文件数据保存数据库。
|
|
|
|
|
|
|
|
|
|
在使用这些脚本之前,首先使用'-o'选项运行httpry。当获取到输出文件后,立即使用如下命令执行脚本:
|
|
|
|
|
|
|
|
|
|
$ cd httpry/scripts
|
|
|
|
|
$ perl parse_log.pl -d ./plugins <httpry-output-file>
|
|
|
|
|
|
|
|
|
|
你可能在使用插件的时候遇到警告。比如,如果你没有安装带有DBI接口的MySQL数据库那么使用db_dump插件时可能会失败。如果一个 插件初始化失败的话,那么这个插件不能使用。所以你可以忽略那些警告。
|
|
|
|
|
|
|
|
|
|
当parse_log.pl完成后,你将在httpry/scripts 目录下看到数个分析结果。例如,log_summary.txt 与如下内容类似。
|
|
|
|
|
|
|
|
|
|
![](https://farm4.staticflickr.com/3845/14799162189_b85abdf21d_z.jpg)
|
|
|
|
|
|
|
|
|
|
总结,当你要分析HTTP数据包的时候,httpry非常有用。它可能并不被大多Linux使用着所熟知,但会用总是有好处的。你对这个工具有什么看法呢?
|
|
|
|
|
|
|
|
|
|
--------------------------------------------------------------------------------
|
|
|
|
|
|
|
|
|
|
via: http://xmodulo.com/2014/08/sniff-http-traffic-command-line-linux.html
|
|
|
|
|
|
|
|
|
|
作者:[Dan Nanni][a]
|
|
|
|
|
译者:[译者ID](https://github.com/DoubleC)
|
|
|
|
|
校对:[校对者ID](https://github.com/校对者ID)
|
|
|
|
|
|
|
|
|
|
本文由 [LCTT](https://github.com/LCTT/TranslateProject) 原创翻译,[Linux中国](http://linux.cn/) 荣誉推出
|
|
|
|
|
|
|
|
|
|
[a]:http://xmodulo.com/author/nanni
|
|
|
|
|
[1]:http://xmodulo.com/2012/12/how-to-set-up-proxy-auto-config-on-ubuntu-desktop.html
|
|
|
|
|
[2]:http://xmodulo.com/2012/11/what-are-popular-packet-sniffers-on-linux.html
|
|
|
|
|
[3]:http://xmodulo.com/2014/06/monitor-nginx-web-server-command-line-real-time.html
|
|
|
|
|
[4]:http://dumpsterventures.com/jason/httpry/
|
|
|
|
|
[5]:http://xmodulo.com/2013/03/how-to-set-up-epel-repository-on-centos.html
|