集群系统中负载均衡模块的设计与实现-软件工程专业论文.docxVIP

Classified Index: TP311 U.D.C.: 621.3Dissertation for the Master’s Degree in EngineeringTHE DESIGN AND IMPLEMENTATION OF LOAD BALANCING MODULE OF CLUSTER SYSTEMCandidate: Supervisor: Associate Supervisor:Academic Degree Applied for: Speciality:Affiliation：Date of Defence:Degree-Conferring-Institution:Linjun ChenA.Prof. Zhang Weizhe Engineer Sun Hongwei Master of Engineering Software Engineering School of Software June, 2012Harbin Institute of Technology摘要随着信息技术的飞速发展，集群系统在各行各业中得到了很大的发展和应用， 集群系统是由多台较小的计算机组成，具有高效，成本低，易扩展等特性，是高 性能计算机的基础。集群作业管理系统是集群系统得以高效运行的关键，而其中 负载均衡模块是集群作业管理系统的核心，一个好的负载均衡模块可以提高系统 的资源利用率，缩短作业在系统中的等待时间，可以根据需要平衡各个计算节点 的负载。由于计算机硬件得到了飞速提升，用户的需求也发生了变化，有时候，一个 服务比较耗费资源，需要计算节点上的多个计算资源才得以运行。而另外一些服 务则比较轻，可以几个服务共享一个计算资源来运行，使资源得到充分利用。而 以往的产品中未考虑到各个任务的特殊性，每个服务都只使用一个计算资源。为了解决这个问题，设计实现了新的负载均衡模块，研究了负载均衡调度算 法，对服务所需资源，进行了量化，系统根据用户设置的属性，在调度模块中结 合该量化的参数与当前的资源进行分配。研究了资源数据在程序中的表示以及优 化，资源分配的过程，资源的获取，资源的释放。其中分配过程可以分为对当前 集群状态的获取，按照比例值进行的资源分配值计算，对资源分配值计算后，对 无法分配的资源进行再次分配，保证最大限度的使用资源。特别引入了抢占功能， 抢占功能使得服务重的作业不必等待其他作业的完成，立即获得所需的资源运行 自己的服务。最后则对本模块进行测试。证明了本模块的正确性。通过本文的研究，设计与实现，完成了系统的负载均衡模块，该模块在集群 系统中能够很好的工作，很好的解决了不同资源需求的作业在集群系统中的资源 分配问题，满足了需求，有很高的实用价值。关键词：集群系统；资源管理；负载均衡；抢占AbstractWith the rapid development of information technology, the cluster system gets a lot of development and application in all walks of life. The cluster system is composed of multiple small computers, it’s provided with high efficiency, low cost, easy to expand features. It’s the foundation of high-performance computer. Cluster job management system can be the key to efficient operation in a cluster system, which load balancing module is the core of the cluster job management system. A good load balancing module can improve system resource utilization and reduce job waiting time in the system; it can balance the load of each computing node according to the request.Computer hardware has been a rapid increase, also the request of user has been changed, sometimes, the user’s service is a resource-intensive service