本体驱动的并行网络流量分类方法研究-信息与通信工程专业论文.docxVIP

摘要 摘要 I I 万方数据 摘 要 伴随着高速、大规模复杂网络的出现，网络流量数据呈现出多源、异构、海量 的特点，致使网络流量分类面临巨大的挑战。目前存在的主要问题归结为：多个数 据源提供的网络流量数据之间可能会存在数据不一致性问题，从而影响网络流量分 类结果的准确性；面向海量网络流量数据的处理将会遇到单一节点的计算能力瓶颈， 存在数据处理效率低下的问题。结合本体与云计算各自在海量异构数据描述与处理 方面的互补优势，将其引入网络流量分类领域，研究本体驱动的并行网络流量分类 方法。论文的主要创新工作有： 针对传统网络流量分类模型难以胜任大规模复杂网络环境下流量分类任务的问 题，根据当前网络流量数据所呈现的新特点，提出一种本体驱动的网络流量并行分 类模型。该模型划分为网络流量数据源层、网络流量本体构建层、网络流量分类层 和应用服务层，将流量分类任务从数据采集、数据描述到数据分类按模块分层执行。 并基于该模型设计原型系统，该系统能够较好地适应大规模网络环境下的网络流量 分类需求。 为了解决网络流量数据并行集成及消除数据集成中语义异构问题，提出一种基 于 MapReduce 的网络流量本体构建方法。该方法利用本体在知识描述方面的优势， 抽象出网络流量的概念模型，对网络流量数据进行有机、分层、语义化描述，构建 网络流量本体，并结合 MapReduce 并行处理架构将本体构建方法并行化。实验结果 表明，集群环境下并行网络流量本体构建效率明显高于单机环境，而且适当增加计 算节点可以使得加速比线性提升，这些优势随着流量数据规模的增大呈显著趋势。 为了提高大规模复杂网络环境下的网络流量分类性能，依据本体具备知识推理 功能的特性，提出一种基于本体的并行网络流量分类方法。该方法针对本体描述的 网络流量实例，借助决策树算法建立分类模型，转化生成推理规则集，最后通过并 行化的知识推理引擎实现网络流量分类。实验结果表明，与 SVM、BayesNet、BP 神 经网络分类方法相比，该方法采用的 C4.5 方法建立分类模型所需的训练时间明显低 于其他方法，而且在识别准确率、泛化能力及稳定性方面表现最优，此外，该方法 的并行分类效率明显优于单机环境。 关键词： 网络流量分类；本体；知识推理；并行化；云计算 Abst Abstract II II 万方数据 Abstract As the high-speed, large-scale complex networks appeared, network traffic data shows several characteristics including multi-source, heterogeneity, mass, resulting in a situation that network traffic classification faces a great challenge. The current problems are summarized as follows: there may be some problems that the data is inconsistent among network traffic data of a plurality of data source, then affecting the accuracy of network traffic classification results; the processing of the massive network traffic data is coming across computing bottleneck of a single node and showing inefficient data processing. In this paper, we will combine the advantage of ontology and cloud computing in dealing with the description and processing of mass heterogeneous data, and it will be introduced into the field of network traffic classification, to research the method of ontology driven parallel network traffic classification. The main innovations of this paper are: To improve the shortage of