基于作业流的虚拟作业管理环境的研究-计算机系统结构专业论文.docxVIP

图目录图目录 图目录 图目录 图1-1机群系统的典型体系结构 ． 3 图2-1 Conder DAG ． 10 图3-1系统架构．． ．16 图舢1串行路由．． ．21 图乒2并行路由。 ． 22 图知3 AND·spin和AND-join． ．22 图44选择路由 ．22 图舢5 OR·split和OR-join ． ．23 图4-6AND／OR—split ．． ．． ．． ．23 图4．7循环路由(repeat until )．．． ．24 图4-8循环路由(while do ) 。 ．24‘ 图5-1作业流引擎处理流程 ．29 图5-2容器sequential ． 。30 t^一 图5-3容器parallel 。30 图54容器sequential和parallel 。 图5-5容器for ．．． ． 图5·6容器for(sequential) ．．． 。 。32 图5·7容器for(parallel) 。 ．．32 图5—8容器sequential执行模型 ．．33 图5-9容器parallel执行模型 ．．． ．．34 图6-1 Phoenix系统架构 ． ．．37 图6-2 Phoenix Web Portal ．． ．．． ．．39 图6-3 JMSWebPortal系统架构 ．．39 图64MVC设计模式 图6．5基于MVC的系统设计 图6-6基于角色的权限管理． ． ．．42 图6．7作业流编辑器 ． ．． ．zk} 图6-8层次化的作业流图 z轴4 Ⅶ 表目录表目录 表目录 表目录 表1-1可扩展并行计算机的主要特征 ．． ．2 表2-1PBS依赖模式 ．8 表2．2LSF依赖模式 ．9 表2．3 JMS分析总结 11 IX 声 声 明 本人声明所呈交的论文是我个人在导师指导下进行的研究工作及取得 的研究成果。就我所知，除了文中特别加以标注和致谢的地方外，论文中 不包含其他人已经发表或撰写过的研究成果。与我一同工作的同志对本研 究所做的任何贡献均已在论文中作了明确的说明并表示了谢意。 作者躲嘟颓 日期．200石．5．勾 论文版权使用授权书 本人授权中国科学院计算技术研究所可以保留并向国家有关部门 或机构送交本论文的复印件和电子文档，允许本论文被查阅和借阅，可以 将本论文的全部或部分内容编入有关数据库进行检索，可以采用影印、缩 印或扫描等复制手段保存、汇编本论文。 (保密论文在解密后适用本授权书。) 作者签名：奄顿导师签名： 日期：Z∞6．5．20’ 第一章引言第一章引言 第一章引言 第一章引言 随着社会和科学技术的发展，人们对计算机运算速度和处理能力的要求越来越高。 高性能计算被广泛地应用于各行各业，像石油勘探、气象预报、生物信息处理、数字图 书馆、虚拟现实和数字电影等。目前，机群系统以其优越的可扩展性、可用性、可靠性 和性价比在高性能计算机系统中占有主导地位． 本章首先回顾可扩展并行计算机体系结构，简要叙述机群系统及其主要特征，然后 概述机群作业管理系统，最后介绍我们的主要工作和本文的组织。 1．1可扩展并行计算机体系结构 在近十年中出现了许多不同的支持高性能计算的超级计算机系统【¨。一般按照它们 的处理器、内存和连接方法来分类，最常见的系统包括： ● 基于分布存储的并行处理系统(MPP) ·共享存储的多处理机(SMP) ·一致缓存不一致内存访fa](CC-NUMA) ●分布式系统 ●机群 MPP通常是指使用无共享资源结构的大型并行处理系统。它一般包括几百个处理单 元(结点)，结点间以高速内部互联网络连接。每一个结点都有各种硬件部件，但一般 来说包括一个主内存和一个或多个处理器。另外，特殊的结点也可以有磁盘或备份系统 与之相连。每一个结点分别运行各自的操作系统。 当今的SMP系统通常拥有2至64个处理器，可以把它认为是共享一切的结构。在 这种系统中，所有的处理器共享可用的全部资源(总线、内存和FO系统)，使用一个 操作系统． CC-NUMA是可扩展规模的多处理器系统，是一致缓存不一致内存访问的结构。像 SMP一样，CC-NUMA系统中的每一个处理器都可以访问所有内存。这类系统的名字 0aJMA)来自于访问最近和最远内存所需的时间的不一致(non-unif0皿times)。 分布式系统可以被认为是由独立计算机构成的常规网络系统。它们拥有多个系统界 面，每个结点运行它自己的操作系统，而且，分布式系统的每台机器可以是MPP、SMP、 机群或单个计算机． 基本上说，机群是一群以网络技术连接起来的工作站或PC机的组合。为了进行并 行计算，机群一般由以高速网络连接起来的高性能的工作站或PC机组成。机群在工作 1 摹于作业流的虚拟作业管理环境中像一个统一的整合资源，所有结点使用单一界面． 摹于作业流的虚拟作业管理环