PC-FARM的使用.pptVIP

PC-FARM的使用 王永刚 集群（Cluster） PC-FARM是采用集群技术组建的一组计算机 集群与多处理器 集群：一组联网的计算机通过管理软件协同完成特定的任务 集群的优点 便宜 易于扩充和升级 对故障的耐受性高 也可以并行化 集群的出现已有一段历史，早在二十世纪七八十年代，美国DEC公司和Tandem计算机公司就开始了集群的研究工作，开发了基于VMS操作系统的VMScluster集群系统。 PC-FARM的网络结构 使用PC-FARM：登录 hgfarm.hepg.sdu.edu.cn ssh 运算机器不能登录（hgfarm0－10） PC-FARM的作业流程 提交作业 建议使用命令qsub提交 另一种方式 qmon 命令格式 qsub run.sh命令返回 your job 162 (“corsika-run01”) has been submitted JobID（作业号） JobName（作业名） 脚本run.sh 关于SHELL脚本 检查作业运行状态 qmon 命令行 qstat -f 作业标准输出和标准错误文件 作业名.o 作业 Id 作业名.e 作业 Id 显示作业运行状态 登录到hgfarm，运行qstat -f 结果： 《管理和用户手册》P.116 作业状态－挂起的作业 挂起的作业（Pending Job） 只显示作业状态 运行qstat 已完成作业的信息 qacct -j Job_ID作业号 Job_ID 《SGE参考手册》P.5 qacct -o google -j |grep ‘jobnumber\|jobname‘显示用户google所有成功完成的作业的作业号和作业名 检查错误 暂挂的作业（Pending） 出错的作业（Error） 检查文件/home/SGE/default/spool/qmaster/messages和作业标准输出和标准错误文件 控制作业 删除作业 qdel Job_ID Job_ID，通过qsub或qstat -f获得 暂停作业 qmod -s 作业Id取消暂停 qmod -us 作业Id 文档 PC-FARM使用指南 SGE管理和用户手册内容：工作原理 安装方法 使用方法 SGE参考手册详细讲解SGE各个命令的选项和作用 SHELL脚本（一） 什么是SHELL脚本(script)？ 例子：脚本run.sh 返回 SHELL脚本（二） 脚本第一行指明shell #!/bin/bash 使用bash  #!/bin/tcsh 使用tcsh 有效的注释行 #! # #$ SHELL脚本（三） 脚本中命令后面不要加（后台运行，qstat不能正确显示） 使用joe编辑器，末尾加一空行 关于脚本编程 Bash Tcsh 关于本文 HEPG主页链接 * [wangyg@hgfarm wangyg]$ qstat -f queuename qtype used/tot. load_avg arch states ---------------------------------------------------------------------------- hgfarm0.q BIP 1/4 0.67 glinux 71 0 corsika-ru wangyg r 05/14/2003 10:44:20 MASTER ---------------------------------------------------------------------------- hgfarm1.q BIP 1/4 0.51 glinux 76 0 run06.sh wangyg r 05/14/2003 10:45:36 MASTER ---------------------------------------------------------------------------- hgfarm2.q BIP 0/4 0.99 glinux au ------------