并行计算环境及作业调度.pptxVIP

5并行计算环境及作业调度;成都信息工程学院项目实施;Putty是一个免费的、Windows 32平台下的telnet、rlogi和ssh客户端，其主要优点如下： 完全免费 在Windows 下运行的都非常好; 全面支持ssh1和ssh2； 绿色软件，无需安装，下载后可直接使用； 体积很小； 操作简单，所有的操作都在一个控制面板中实现。 putty下载地址： /manage/putty/puttyfile_0.60cn.zip下载完成，解压，即可使用;Putty界面介绍 ;输入管理节点的IP地址 选择ssh ;putty使用方法;用户名：root 密码不显示;资料参考：/other/putty-ssh-linux-vps.html;使用当前用户连接到管理节点 ～/vncserver ～/vncpasswd #按提示输入密码 启动图形界面的配置（默认为文本显示） vi ~/.vnc/xstartup 把最后一行更改为： gnome-session 再重启vnc服务;使用vnc客户端工具，输入IP地址和设置的密码连接 使用WEB方式连接 http://IP:5801 ;1、打开Sude linux 10.2系统的Remote远程管理功能；Redhat Linux系统默认已经打开Remote远程管理功能。 2、Suse Linux 10.2系统配置如下： node253:~ # yast2，选择Remote Administration ;安装Xmanager3软件 输入IP地址 点RUN;Putty使用文本界面方式 VNC和Xmanager可使用文本或是图形界面 VNC： 在使用远程图形界面操作时无法使用TAB键补全命令，关闭软件不会结束当前会话 Xmanager 在使用远程图形界面操作时可以使用TAB键运行命令的补全操作，关闭软件会结束当前会话 根据使用习惯选择不同的远程登录工具 ;PBS作业调度系统 ;机群结构的松散性（单一系统映象） 节点类型的差别（CPU类型、内存大小、数量等） 用户不同类型的作业（串行/并行，各类应用软件） 用户可以使用资源的限制 ;单一系统映象 机群松散的结构的整合 系统资源整合 异构系统的整合 多用户的管理 用户提交的任务的统一安排，避免冲突 用户权限的管理 非授权用户的控制 ;资源管理器： 管理集群的硬件资源及认证信息等 队列管理器： 管理当前所有已提交但还未完成的作业 调度器： 为作业分配资源 ;作业调度系统的结构;服务器: pbs_server 调度器: pbs_sched 执行器: pbs_mom 命令行: 用户???本，管理命令等 ;准备：编写描述改作业的脚本，包括作业名，需要的资源等。 提交：使用qsub命令将该作业提交给PBS服务器 排队：服务器将该任务排入适当的队列 调度：服务器检查各工作节点的状态是否符合该作业的要求，并进行调度。 执行：当条件满足时，作业被发给相应的执行服务器执行。程序运行时执行服务器会收集程序的标准输出和标准错误流，等程序结束时，将这些信息返回给用户。 查询和调整：当作业在运行时，用户可以使用qstat进行状态查询。用户发现作业提交错误时，可以使用qdel删除正在运行的作业。 查看结果：使用文本编辑软件vi或者系统命令cat, less等查看输出及错误信息显示。;在PBS系统中，用户使用qsub 命令提交用户程序。用户运行程序的命令及PBS环境变量设置组成PBS作业脚本，作业脚本使用如下格式提交到PBS系统运行：;注释,以“#”开头 PBS运行参数,以“#PBS”开头 SHELL命令;qsub运行参数;PBS的环境变量;PBS作业脚本举例;一个复杂的PBS作业脚本;查询作业运行;查询作业运行;取消作业;查看节点状态;pbsnodes命令的主要参数 -a 列出所有结点及其属性，属性包括“state”和“properties” -o 将指定结点的状态标记为“offline”。这将帮助管理员暂时停止某些结点的服务 -l 以行的方式列出被标记的结点的状态，如 -l free，-l offline -c 清除结点列表中的“offline”或“down”状态设置，使结点可以被分配给作业 -r 清除指定结点的“offline”状态 ;WRF-PBS范例;MM5-PBS范例;Grapes-PBS范例;相关论坛