气象灾害教育部重点实验室高性能计算机管理与计费软件开发项目 .docVIP

附件: 气象灾害教育部重点实验室高性能计算机管理与计费软件开发项目招标技术参数 1、需求概述 随着学校规模的扩大和技术的不断发展，为了提升高性能计算中心管理水平和资源的共享利用，拟建设高性能计算中心使用统计和计费系统，更好地帮助学校完成内部和外部的费用计算，能够对现有业务运营和发展状况进行分析和管理。该系统能够实现高性能计算中心资源的使用情况、详细的统计分析，并提供记账和计费功能，为决策者们提供决策支持和科学依据。 2、方案设计 考虑到未来高性能计算中心可能需要提供远程、基于web的作业提交和管理功能，结合现有的HPC统计分析，及拟建立计算资源计费统计系统，需要一个可拓展的框架，该框架可以快速地集成、加入更多的模块, 从而建立一套稳定、高效、易扩展的解决方案。 3、开发范围 底层的作业明细信息的数据来源于Altair现有的统计分析PBSA 计费系统基于B/S架构 所有合法用户通过前端浏览器查看计费信息和导出功能 计费系统具备能基于用户、用户组的权限管理控制 4、系统技术参数详细描述 ﹡4.1、利用命令行工具或JAVA程序,每天定时采集来自PBSA的作业明细数据,然后导入到数据库中.具体包含的字段有： 作业用户名 作业号 作业使用的项目号 作业使用的队列 作业申请的节点数 作业申请的CPU 作业实际使用的CPU 作业实际使用的内存 作业节点是否共享 作业实际运行墙钟时间 作业提交时间 作业等待时间 作业开始运行时间 用户组权重系数（自定义资源属性） ﹡4.2、在获取到作业明细数据的基础上,通过JAVA程序/命令行工具/存储过程,结合作业计费的运算规则，最终能够运算得出计费汇总账单（计费周期内）及计费明细账单（计费周期内），先统计明细账单，再根据明细账单统计汇总账单。 计费参数文件格式及内容 格式：通用linux参数文件格式或数据库方式 参数组名 参数名=参数值 内容 基础计费基数 队列权重系数 时段权重系数 计费机时 计算量按‘核·小时’为单位来进行统计 独占任务 墙钟秒数 / 3600 x 所用计算节点 x 核数 x 队列权重系数 x 时段权重系数x用户组权重系数 共享任务 墙钟秒数 / 3600 x 所用核数 x 队列权重系数 x 时段权重系数x用户组权重系数 机时费计算 机时费 = 计费机时 x基础计费基数 未定义的队列采用缺省队列权重系数 当队列设置为可跨时段计费时，根据作业运行所跨的时段分别使用不同的权重系数分段计算并累加 当队列设置为不跨时段计费时，使用作业开始运行时所在时段的权重系数进行计算 未定义的时段采用缺省时段权重系数 未定义的用户组采用缺省用户组权重系数 作业汇总账单（计费周期内） 项目号 预定可用机时 累计起始时间 累计终止时间 累计实际使用机时（核·小时） 累计最终计费机时（核·小时） 累计机时费 作业明细账单（计费周期内） 项目号 作业用户名 作业号 作业实际使用机时（核·小时） 作业最终计费机时（核·小时） 作业机时费 4.3、管理人员或信息录入授权人员，通过浏览器手动录入账号申请表,资源申请表（见附件）来达到预先设置计算项目资源，计算账号的有效期等信息，为计算剩余资源做好准备。 ﹡4.4、当普通用户或管理员通过浏览器登陆到计费系统之后,能够进行查询和管理，具体功能要求如下： 普通用户自助查询 作业信息、计费信息查询、导出 可分/或同时指定时间段、指定项目号进行与自己相关的查询 可导出为EXECL或CSV格式的文本文件 仅可查询、导出所属项目组的信息 项目成员管理（仅项目负责人或获得相应授权的成员） 项目负责人缺省具有对项目成员的维护权限 项目负责人可以授权一个或多个人员对项目成员列表的维护权限 获得授权的人员可以对项目成员列表进行维护 可查询、导出所属项目负责人下的所有相应项目的信息 可选择任意字段名进行排序 管理员 信息录入（获得相应授权的的管理人员） 用户信息 计算项目信息 信息更改（获得相应授权的的管理人员） 用户信息 计算项目信息 信息查询（获得相应授权的的管理人员） 可查询所有的信息并导出为EXCEL表格或CSV格式文本文件 可选择任意字段名进行排序 多极安全机制控制 信息录入授权人员不能与信息更改授权人员相同 作业账单信息更改授权人员与用户信息录入、更改授权人员不能相同 备注：如果多极安全机制控制部分实现有一定困难，可采用记录日志的方式供高级管理员查询审计。 4.5、为了根据配额进行作业动态管理，如果已经超过预设配额，就通过hook拒绝提交作业，所以需要另外提供程序,每天定时更新导出作业汇总账单到TXT文件到具体目录，方便hook读取。 ﹡4.6、PBS作业管理 作业提交资格检查的hook脚本 检查作业项目号是否有效，如无效则拒绝 用户是否属于该项目号下的成员，如不在项目成员列