换用 Rust 解析 pcap：快了1000倍！

内容简介：换用 Rust 解析 pcap：快了1000倍！

前天手上有个VPS的提供商发来通知，说VPS在攻击别人的80端口，被第三方投诉了-_-|||

我跑上去看了好久，啥也没发现。进程列表、登录日志、网络使用、各服务我能找到的日志都检查了一遍，也跑了遍 dpkg --verify，啥也没发现。没办法，我就留了句 tcpdump 命令，看看能不能抓到那些恶意流量：

sudo tcpdump -vv -s0 -w port80.log '(dst port 80 and src host 123.456.789.0) or (src port 80 and dst host 123.456.789.0)'

盯了好久，一直只看到有零星的正常访问。

就这么放了一天。第二天想起来的时候过去一看，哇塞，抓到了 2.1G 的包！看来真出问题了。先分析一下得到的 pcap 文件吧。

这么大的 pcap，自然不能拿 Wireshark 打开了。我知道 scapy 能够读取 pcap，于是用它读取 pcap，收集另一方的 IP 地址，看看流量到底都去哪里了。代码很简单，20多行。跑起来～ progress 告诉我需要半小时……

于是半小时过去了。我能看到它访问了不少IP，很多是意料之外的。我就想，这些流量是什么时候发生的呢？不过我可不想再花半小时等结果了。然后再想得到点别的数据又得半小时。而且 Python 这种动态类型的语言，稍微复杂一点之后就容易抛异常。说不定快跑出结果的时候，抛个异常出来，前边就全白跑了……

所以就试试 Rust 啦。去 docs.rs 上一搜，还有好几个可以解析 pcap 的库呢。那就第一个吧，叫「pcap」的这个。程序写起来也挺容易的，甚至代码行数都跟 Python 版相仿。时间的处理也是用了一个之前没用过的库「chrono」。并没有花多长时间，直接在文档里找到我需要的功能，然后编译通过就成了 O(∩_∩)O~

extern crate pcap;
extern crate chrono;

use std::collections::BTreeMap;
use chrono::prelude::*;

fn main() {
  let mut capture = pcap::Capture::from_file("../port80.log").unwrap();
  let mut distribution = BTreeMap::new();
  while let Ok(pkt) = capture.next() {
    let t = pkt.header.ts.tv_sec;
    let by_hour = t / 3600 * 3600;
    let dt = Local.timestamp(by_hour, 0);
    *distribution.entry(dt).or_insert(0) += 1;
  }

  for (t, c) in distribution {
    println!("{}: {:8}", t.format("%Y-%m-%d %H:%M"), c);
  }
}

然后花了几秒编译出来优化版本的程序，跑起来～然后我切换到另一个 shell 去跑 progress。啥，没找到进程？再回来一看，哦哦，已经跑完了！只花了一两秒！

这是一千倍的差别啊！虽然两个程序所做的事情并不一样，比如 Python 版用的 scapy，实际上会把整个网络包的各层协议都给解析了，而不像 Rust 版只解析了 pcap 的记录头。但是我又没有别的选择，就像我也不能让 Python 别管引用计数一样。

对于这种小任务，Python 还是强在对少量数据的交互操作，比如Jupyter Notebook 就很强大。而数据量一旦大起来，就是 Rust 的天下了 :-)

以上就是本文的全部内容，希望对大家的学习有所帮助，也希望大家多多支持 码农网

查看所有标签

猜你喜欢:

• 每秒解析千兆字节的 JSON 解析器开源，秒杀一大波解析器！
• 注册中心 Eureka 源码解析 —— EndPoint 与 解析器
• 新一代Json解析库Moshi源码解析
• mybatis源码配置文件解析之三：解析typeAliases标签
• MySQL内核源码解读-SQL解析之解析器浅析
• Laravel 核心——IoC 服务容器源码解析（服务器解析）

本站部分资源来源于网络，本站转载出于传递更多信息之目的，版权归原作者或者来源机构所有，如转载稿涉及版权问题，请联系我们。