基于云计算的分布式网络测量系统设计.pdfVIP

第32卷第u期 微 计 算 机 应 用 2011年 11月 MICR0C0MPUTERAPPLICATIONS VoL32No．11 NOV．2Ol1 基于云计算的分布式网络测量系统设计 何 娜 崔毅东 杨 谈 金跃辉 (北京邮电大学 网络与交换技术国家重点实验室 北京 100876) 摘要：随着互联网的迅速发展和IP应用的普及，网络性能状况越来越受到人们的关注。网络性能数据对于分析网络行为，解 决网络故障，规划新业务等具有重要的参考价值。本文设计了基于云计算的分布式网络测量系统。利用Hadoop平台的可靠 存储和并行计算能力，解决了海量数据安全存储和快速计算的问题。用户可以在系统中方便地部署各种测量算法，完成网络 性能的测量和评估。 关键词：网络测量 云计算 Hadoop ． TheDesignofA NetworkM easurementSystem BasedonCloudComputing HENa，CUIYidong，YANG Tan，JINYuehui (NationalKeyLabofNetworkandSwitchingTechnology，BeijingUniversityofPostandTelecommunications，Beijing，100876，China) Abstract：AsInternetcontinuestogrow exponentiallynadapplicationsoverIP newtorkbecomemoreandmorepopular，newtorkper- formna eehasgottenmorena dmoreattention．Newtorkperformna cedatahasaveryimportantreferencevalueforanalyzingnewtorkbe- havior，solvingnewtorkfaultandplanningnew services．Inthispaper，wedesignadistributednewtorkmeasurementsystem basedon CloudComputing．Withhtereliable—storageandparallel—computingbailityofhteHadoop，wesolvetheissuesofsecuritystorageand fastcomputingof thelargedataset．Inthesystem，wecandeploymeasurementalgorihtmseasilyinordertomeasureandevaluatethe newtorkperformance． Keywords：NetworkMeasurement，CloudComputing，Hadoop 1 引言 随着Internet技术和网络业务的飞速发展，用户对lP资源的需求空前增长，网络变得 日益复杂。不断增 加的用户和应用导致网络负担沉重，从而引起网络性能下降，这就需要提取和分析网络的性能指标。因此， 网络性能数据对于分析网络行为、解决网络故障、规划新业务等都具有很重要的参考价值。 如何处理海量数据和提高测量效率是网络测量的重要研究点。在现有技术中，网络测量的数据分析操 作大多采用集中管理的平台。由独立的一个管理平台同时对多个测量探针的海量测量数据进行分析和存 储，无法保证数据的存储安全，而且在处理海量的测量数据时，因其计算能力有限，容易成为整个系统的瓶 颈。随着云计算技术的推广，利用云计算平台强大的数据处理能力来处理海量数据，已经成为当前网络测 量的研究与发展趋势。云计算…是一种新兴的商业计算模型，它藉由网络把多个成本相对较低的计算资源 进行统一管理和调度，构成一个计算资源池，能够向用户提供透明、强大的计算能力。利用云计算平台可以 很好的提高网络测量的效率。本文根据网络测量的实际要求，设计 了基于云计算的分布式网络测量系 统 。在云平台的集群系统中