高速骨干网流量采集与分流实现方案 - MSCBSC 移动通信论坛

阅读：2790
回复：2

关注楼主

高速骨干网流量采集与分流实现方案

networks666

入门会员

发短消息

关注Ta

积分 30
帖子 6
威望 2222 个
礼品券 0 个
专家指数 0
注册 2014-10-21
专业方向 yanfa
回答问题数 0
回答被采纳数 0
回答采纳率 0%

#1

大中小

使用道具

发表于 2014-10-21 11:55:54 只看楼主

高速骨干网流量采集与分流实现方案

1
流量采集
所谓流量采集，就是将网络流量通过物理层、数据链路层的信号解析和解帧，实现IP原始报文的获取。骨干网流量采集系统是一种对骨干网进行流量获取并分析的系统，主要应用于政府网络管理、运行商广告推送、运行商计费取证服务、运行商信令监控服务、园区网审计、公安网监、大数据分析等领域。
2
高速网络流量采集系统
随着以太网技术和光纤通信技术的应用，骨干网带宽的增长及规模的扩大，大规模的网络流量采集面临着数据规模庞大和流量日益复杂的挑战，传统的基于软件的流量采集技术的性能已然无法满足要求。现有的高速骨干网流量采集方案主要分为三类：基于多核处理器的流量采集方案，基于交换芯片的流量采集方案，和基于FPGA的网络流量采集方案。
每种方案各有特色，下文将一一进行说明。
a)
基于多核处理器的高速网络流量采集系统
多核处理器能够提供强大的并行计算能力，应用于流量采集系统的主要型号有Broadcom的XLP、XLR、XLS，Cavium的CN6880、CN5880，以及Tilera的TILE-GX36等。采用此方案的系统可编程实现流量采集，还可对报文进行修改，具有非常高的灵活性。但系统CPU的处理能力有限，无法真正实现线速处理，整体性能不会很高，但是由于有处理器的参与，比较复杂的处理，如流表的管理、应用层协议识别、Radius上线与报文绑定等功能比较容易实现。

[attach]314719[/attach]

图1 一种基于CaviumCN6880的流量采集器CDP2000

b)
基于交换芯片的高速网络流量采集系统
交换芯片的价格较便宜，且有成熟的套片解决方案可供参考。但其过滤功能非常弱，只支持非常简单的精确多元组过滤，无法做深度报文检测（DPI: Deep PackageInspection），且无法支持POS和WAN等以太网接口，这也使得基于交换芯片的流量采集方案在实际使用的范围受到限制。
c)
基于FPGA的高速网络流量采集系统
基于FPGA的解决方案目前较少，主要原因是FPGA芯片价格较贵，且需自行设计所有高速电路和过滤算法，技术门槛较高，需要深厚的研发能力。但其兼有多核系统的高灵活性和交换系统的高性能，优势也是非常明显的。

[attach]314720[/attach]

图2基于FPGA的100G网络流量采集系统HFC602

表

1

三种流量采集方案的比较

基于多核处理器

基于交换芯片

基于FPGA

芯片价格

一般

较低

较高

硬件设计难易度

一般

较容易

较难

软件开发难易度

一般

较容易

较难

常见网络接口的兼容性

中

低

高

流量采集的灵活性

高

低

一般

是否实现线速处理

否

是

基于多核处理器+交换芯片的流量采集方案是目前应用最为普遍的方案，虽然系统整体价格略贵，但软硬件发开难度不大，入门门槛较低。
但随着FPGA的发展，其内部资源日益丰富，特别是内部嵌入了大量IP核，在处理速率、逻辑容量等方面不断提升，基于FPGA的方案受到了越来越多的关注，国内外许多研究机构及公司先后推出了基于FPGA的网络流量采集系统。
图2所示是常见基于FPGA的流量采集系统的结构图，流量采集及预处理平台获取网络端口送来的网络数据包，并对数据包进行流量统计和分析，最终根据流量分析的结果将网络数据包进行分流重新转发回网络中。系统采用硬件和软件协同实现设计思路，对于数据包的协议解析、数据预处理都由硬件电路实现；后端服务器进行流量的具体分析处理。通过预处理平台对流量进行分类归并和低负载数据传输，有效减少了后端服务器的工作量；服务器对预处理后的数据进行处理，可以有效降低流量处理过程的负载开销。
3
小结
戎腾网络科技有限公司推出的100G采集设备（采用ATCA-NTW6401机箱和HFC602业务处理板卡）是目前市面上唯一经过了实网验证的设备，10G独立机箱设备（PET160/320）是目前最大密度的协转设备，3G/LTE产品（ATCA-NTW6402）由于采用软硬结合方案（FPGA+NPU），单板处理能力达到40G bps 3G GRE/ 160G LTE，具有最高性价比。

扫码关注5G通信官方公众号,免费领取以下5G精品资料

1、回复“LTBPS”免费领取《《中国联通5G终端白皮书》》

2、回复“ZGDX”免费领取《中国电信5G NTN技术白皮书》

3、回复“TXSB”免费领取《通信设备安装工程施工工艺图解》

4、回复“YDSL”免费领取《中国移动算力并网白皮书》

5、回复“5GX3”免费领取《 R16 23501-g60 5G的系统架构1》

6、回复“iot6”免费领取《【8月30号登载】物联网创新技术与产业应用蓝皮书——物联网感知技术及系统应用》

7、回复“6G31”免费领取《基于云网融合的6G关键技术白皮书》

8、回复“IM6G”免费领取《6G典型场景和关键能力白皮书》

对本帖内容的看法？我要点评

作者的更多帖子

[充值威望，立即自动到帐] [VIP贵宾权限+威望套餐] 另有大量优惠赠送活动，请光临充值中心
充值拥有大量的威望和最高的下载权限，下载站内资料无忧

kinghighland

VIP会员

发短消息

关注Ta

积分 3985
帖子 711
威望 246269 个
礼品券 232 个
专家指数 350
注册 2012-1-15
专业方向端到端与大数据网优解决方案
回答问题数 0
回答被采纳数 0
回答采纳率 0%

#2

大中小

使用道具

发表于 2014-10-26 18:56:27

几种方案的对比欠缺一些客观性，难免会影响可信度
不应该假设信息不对称是对自己有利的

对本帖内容的看法？我要点评

流鲨 (FlowShark) 是2016年开始流行的信令分析工具，除了支持Volte(IMS+EPC)的信令分析，流鲨还支持四大设备商的软采数据。如果你第一次听说流鲨，那说明你已经凹特啦，你一定没注意到，身边的同事已经开始用了。即刻加入流鲨集结号Q群(54825631, 193964716, 316429471)，这里有来自三大运营商、五大设备商、各地研究院与设计院、500家三方优化公司的网优工程师。

网盘下载最新版流鲨安装包：
https://pan.lanzou.com/b108909/

关注我们微信公众号的C友，请扫描下面的二维码:

[立即成为VIP会员，百万通信专业资料立即下载，支付宝、微信付款，简单、快速！]

lyasp

入门会员

发短消息

关注Ta

积分 5
帖子 1
威望 28 个
礼品券 0 个
专家指数 0
注册 2015-3-10
专业方向流量分析
回答问题数 0
回答被采纳数 0
回答采纳率 0%

#3

大中小

使用道具

发表于 2015-03-10 14:14:40

有收获，希望能进一步了解^_^

对本帖内容的看法？我要点评

当前时区 GMT+8, 现在时间是 2024-04-28 12:34:54
渝ICP备11001752号 Copyright @ 2006-2016 mscbsc.com 本站统一服务邮箱：mscbsc@163.com

快速回复主题
标题
内容	上传资料请点左侧【添加附件】


	您即将访问其它网站关闭您即将访问的地址是其它网站的内容，MSCBSC将不再对其安全性和可靠性负责，请自行判断是否继续前往继续访问取消访问，关闭

对本帖内容的看法？ 我要点评

对本帖内容的看法？ 我要点评

对本帖内容的看法？ 我要点评

您即将访问其它网站关闭

对本帖内容的看法？我要点评

对本帖内容的看法？我要点评

对本帖内容的看法？我要点评