铁通集团全流量分析系统_NDC流量采集业务分析_v1.docx

中国铁通集团互联网全流量统计分析系统NDC流量采集分析（NetFlow）功能确认中国铁通集团有限公司鼎兴联通（北京）网络科技有限公司2014/3/18互联网流量的迅速增长加大了CTTNET骨干网链路带宽的压力，也带来了网络扩容成本的增加。为能够及时、准确、全面掌握公司互联网用户流量及业务的发展变化情况，实现对铁通宽带及专线用户的全流量的统一数据采集、监控与统计、流量流向分析、业务模型分析、用户行为分析及基础安全防护等内容，中国铁通拟建设互联网全流量统计分析系统，从而帮助网管人员了解网络的流量模型，精确分析网络使用状况，提升整体网络的质量及效能。对全网NDC系统共约350G数据流量进行采集分析，实现对NDC平台业务流量的监控与分析，方便网管人员掌握各节点各业务流量的分布及变化趋势，及时掌握平台中异常流量，为故障及时得到处理提供依据，同时为各业务的合理部署、网络配置、路由选择等优化措施提供数据依据。鼎兴联通（北京）网络科技有限公司在深刻理解用户需求的基础上，对NDC流量采集统计分析，并且做个功能设计并实现。本文的目标是为了实现项目实现功能与用户期望的一致性，减少项目实施后的二义性，减少双方理解上的偏差。全流量分析系统上线后，在用户具体的使用过程中也会提出新的需求，鼎兴网络在一定范围内积极响应用户的功能，保证全流量分析系统顺利上线使用。NDC流量采集统计分析功能配置功能 协议端口配置：配置网络层的传统协议端口与协议的对应关系。NetFlow的协议识别根据传输层的端口，只能识别传统标准的协议，对于非标准的未规范的不能识别。区域类型：区域类型配置，可以配置A\B\C类区域。对业务区域分类。NDC业务配置：对NDC的业务与地址段的对应关系配置。统计分析接口流量对比：路由器的接口按照SNMP数据和按照NetFlow数据分别统计的结果对比。NDC业务流量：NDC业务经过各个骨干节点，在各省份之间的流量情况。NDC区域流量：N DC的业务在各区域的流量情况。NDC业务更新流量：NDC业务通过骨干网，从其他运营商获取的流量。各省份在省网关出口上，不允许其他表运营商流量访问。NDC CP流量：NDC CP各业务服务器的流量情况，在各省份间的流量分布。NDC流量异常变化：NDC CP流量变化监控，当CP流量变化较大时，给出预警信息。业务流量监控：对5分钟的NDC 业务流量监控，监控NDC业务最近的趋势变化。铁通集团互联网部门对功能建议2014年3月12日上午，鼎兴网络技术人员郝明、朱海洲等与铁通集团陈新，柴宇对骨干网省间流量采集统计分析的功能确认，并且提出了一些建议和想法。整理如下：全流量分析系统功能项铁通集团负责人意见鼎兴网络调整方式增加ndc业务的协议流量分析明细表对ndc业务流量成分进行分析。增加ndc的业务流量成分协议分析。对全网ndc cp详细列表导入提供各个ndc cp 详细文件对ndc cp 文件能够进行导入。Ndc全网流量增加对各地市的流量情况分析增加对各地市的ndc流向流量列表。增加全网拓扑图能够看到全网的拓扑结构增加全网拓扑图，需要铁通集团提供详细的全网拓扑图。项目实施备注事项NDC业务流量分析，也是通过采集铁通骨干网7大核心节点的NetFlow，然后根据各省份铁通的NDC业务地址段，进一步判断各省份之间业务的流量情况。包括NDC业务在各省份的流量，各区域的流量情况。在NDC实施时，各省份需要提供自己省份的NDC地址段和业务的对应关系。目前鼎兴网络有部分数据，也可能需要集团总部协调省份提供。附件_技术规范书 (1)数据采集功能需求a.支持各版本netflow，netstream等数据的采集；b.支持多设备不同采样比的数据采集及智能还原；c.支持采集数据的无丢失转发（目前部分路由器只支持将采样数据发送至最多两个目的地地址，因此需要采集功能可将收到的数据无丢失的转发给其他采集机，以满足多个采集需求）；d.支持统一的管理界面管理需要采集的流量信息，对源路由器、路由器的输入输出端口、采样比、采集周期、转发目标等进行设置；(2)数据过滤功能需求支持基于路由器、物理端口、源/目的IP或子网段、源/目的AS号、网络协议、源/目的端口(应用)等或这些条件的组合来对流量进行过滤，以支持高效的数据采集与灵活的统计分析。 (3)流量监控与分析功能需求a.支持按节点即物理端口的流量实时及周期波动图形监控；此流量可以做SNMP接口流量和flow流量的对比呈现；b.支持按业务即ip地址、ip地址段、ip地址组或上述条件相结合的流量实时及周期波动图形监控；c.支持分级视图定制，以节点和业务、方向（出、入）、方向类型（网内各省、网外各运营商）、区域类型（根据业务不同可将省分定义到不同区域）为基础，可实现灵活汇总及监控、分析（所有选项均可复选），如某业务视图提供