超算cae云平台作业调度管理系统的研究与实现软件工程专业论文.docxVIP

工程硕士学位论文摘 工程硕士学位论文 摘 要 随着计算机技术的发展，我国超级计算机的硬件计算能力突飞猛进，然而超 级计算应用能力仍然较差，构建超算CAE(Computer Aided Engineering)云；平台是 一种有效的解决方案，作业管理是该平台的核心系统。然而CAE作业之间具有较 强的依赖性，～个任务在执行时需要等待其不在同一个处理器上的前驱任务的完 成，作业之间的通信所耗费的时间比较长，从而使得该任务与其分配在同一个处 理器上的前驱任务之间的空闲时间比较长，该空闲时间如果不合理利用，会增加 处理器的执行能耗。本文的目的是设计并实现CAE云平台作业调度管理系统，并 在依赖任务复制和处理器合并的基础上提出一种空闲时间优化节能调度策略，以 降低作业调度运行的能耗，通过实验进行仿真和真实算例的测试验证了该策略的 有效性。本文的主要工作有以下两点： (1)基于超级计算机设计并实现了一个CAE云平台作业调度管理系统，通过 该平台，普通用户可以以WEB的方式随时随地访问超级计算机上的CAE资源， 用户只需按需付费使用即可，充分发挥超级计算机强大的计算能力的同时大大降 低了用户的使用成本。然而，CAE作业往往非常大且具有依赖性，使得作业完成 周期长，作业问的通信造成依赖任务之间的等待时间变长，从而增加了同一个处 理器上的两个任务之间的空闲时间，作业完成周期长和空闲时间的增加会增大作 业调度管理系统的能耗。 (2)本文针对CAE作业调度的能耗问题，提出了一种基于依赖任务的空闲时 间优化节能调度策略，首先基于任务复制调度算法把关键路径上的任务复制到非 关键路径上，以降低任务执行的调度长度；然后将运行任务较少的处理器上的任 务合并到运行任务较多的处理器上，初步降低计算节点上的运算能耗；最后，对 合并后的处理器上具有空闲时间的任务采用降压降频的DVFS(Dynamic Voltageand Frequency Scaling)策略来降低处理器的执行能耗。基于CloudSim仿真 平台对提出的策略进行了实验，并将该策略集成到作业管理系统中，通过实际算 例的运行进行了测试，实验和测试结果表明，在保证调度长度不变的情况下，该 算法能够有效降低作业调度运行过程中的能耗。 本文提出的节能策略测试结果表明该策略能够较好的降低作业调度执行过程 中的能耗。此外，系统开发采用的云技术使用户可以随时随地按需访问超算CAE 资源，大大提高了用户的工作效率，具有较大的应用价值。 关键词：超级计算；CAE云平台；空闲时间；DVFS Ⅱ 万方数据 AbstractWith Abstract With the development of computer technology，computing power of super computer hardware in our country advances rapidly．However，the application ability of super computing is still poor．Building CAE(Computer Aided Engineering)cloud Dlatform in super computer is an effective solution．Job management system 1S the core of the platform system．CAE jobs have strong dependence between them·When a task is in the implementation，it needs to wait for the completion of its precursor task，which is not the same processor．Because of the communication between tasks，the work time is long．Thus，the leisure time between the task and the precursor task on the same Drocessor is longer．If the idle time is not reasonable used，the system will increase the execution power consumption of processor．The purpose of this paper is to design and realize the CAE cloud platform job scheduling management system·Based On dependen