Linux内核实现多路镜像流量聚合和复制的方法
本文就针对此种情况,从Linux内核模块对网络数据库包进行处理,解决上述问题。
应用场景
我们在进行安全性监控、测试的过程中,难免会遇到这样的问题:需要部署大量基于镜像流量的安全设备,如IPS,异常流量,数据库审计,流量分析等,可是交换机上可以做镜像流量的端口数量有限制,购买专业的设备又太昂贵。
本文就针对此种情况,从Linux内核模块对网络数据库包进行处理,解决上述问题。这里也感谢“白金PT”给予的帮助。
架构设计
内核模块的流程比较简单,转发配置从用户态提交给内核模块,如”eth1@eth2_eth1@eth3_eth1/eth4@eth5“,这段的配置是:
来自eth1的流量,复制给eth2和eth3
来自eth1和eth4的流量,聚合给eth5
MIRROR内核模块中,只需要实现参数读取,配置分析,网卡判断(源,目的)即可。
算法、代码实现
参数输入
这段代码的功能是,将前面提到的如“eth1@eth2_eth1@eth3_eth1/eth4@eth5“这样的参数,按照”_”进行拆分,分段提交给参数设置函数”option_setup”
参数设置
这里我们把得到的参数”eth0@eth1”进行进一步的拆分,分出了源网卡eth0,目的网卡eth1,在内核模块的全局变量中,有一个结构
”__read_mostly __u8 ethout_bits[MAX_OUT] ={0};“
用来存储每个网卡对应分发的网卡号,可以这样理解,如果服务器有8个网卡,那么每个网都会有一个8位的二进制数来标明它的转发,比如eth0复制到eth1,那么ethout_bits[0]就等于01000000,以此类推,如果我要把eth0复制到其他所有网卡,就会是01111111。
同时用一个全局的8字节变量,来存储哪些网卡是镜像流量口,防止多余的资源浪费。
__read_mostly__u8 ifindex_bits = 0;
Skb包复制和转发
当Linux内核收到一个skb结构的数据包时,判断这个数据包是不是在转发列表里,也就是网卡是不是镜像源。
接着我用了一个循环,来遍历存储的转发目的网口,如果匹配的话,就使用skb_clone函数将数据包复制一份,然后通过dev_queue_xmit函数直接发送出去。
最后清理skb_buff结构。
启动脚本
为了方便调试和快速提交参数,可以使用如下的shell脚本:
实测效果
编译,填充参数并执行
执行sh sh.sh
Dmesg输出
镜像流量效果
这里可以看到流量统计由于网卡速率,时间差等,并不会100%一样,是正常的。
CPU占用
当流量已经达到400M左右的时候,CPU占用仍然比较低。
相关文章
linux/ubuntu系统怎么安装百度网盘? linux百度网盘安装图文教程
linux/ubuntu系统怎么安装百度网盘?linux系统中想要安装百度网盘,该怎么安装呢?下面我们就来看看linux百度网盘安装图文教程2023-06-02新补丁发布! 修复Linux 6.3 更新导致 XFS 元数据故障
在升级到 6.3.3 维护版本更新之后,基于 XFS 格式的服务器就出现不断崩溃的问题现在已经找到原因,并发布新的补丁,详细请看下文介绍2023-05-30linux如何导出文件到本地电脑? Linux命令导出文件的技巧
linux如何导出文件到本地电脑?linux系统中的文件,想要导出道本地,该怎么操作呢?下面我们就来看看Linux命令导出文件的技巧2023-05-17- 这篇文章主要介绍了Linux系统下载(超全镜像整理下载),需要的朋友可以参考下2023-05-07
深度 deepin 操作系统 20.9今日发布: Qt 版本升级至 5.15.8
深度 deepin 操作系统 20.9今日发布,这个版本的核心目标是:为用户提供稳定的系统运行版本,详细更新内容请看下文介绍2023-04-18Linux Lite 6.4今日发布:基于 Ubuntu 22.04.2 LTS/原生应用支持 Zstd
Linux Lite 6.4今日发布,引入了诸多新功能 / 新特性,升级了相关组件,并优化了性能,详细请看下文介绍2023-04-02Linux 6.3发布第4个候选版本: diffstat占比超过50%
Linux6.3第4个候选版本发布,这意味着 6.3 的开发周期已经走过了一半路程,下面我们就来看看这个版本的公告内容2023-03-27linux无法识别ntfs格式U盘怎么办? 解决linux不识别nfst格式u盘问题技巧
linux无法识别ntfs格式U盘怎么办?在Linux系统中插入ntfs格式的u盘是,无法识别,下面我们就来看看解决linux不识别nfst格式u盘问题技巧2023-02-28linux怎么调整swap大小? linux扩容swap分区的技巧
linux怎么调整swap大小?linux系统中想要扩容swap分区,该怎么操作呢?下面我们就来看看linux扩容swap分区的技巧2023-02-28深度操作系统 deepin V23 Alpha 2 正式发布 预装跨端协同功能
深度操作系统 deepin V23 Alpha 2 正式发,该版本是 V23 的阶段性版本之一,deepin V23 Alpha 2 在主打的行云设计上持续升级,同时支持系统主题高级定制化设置,详细请看下2023-02-09
最新评论