高能物理研究所计算中心DYB.ppt

DYB-DIOM 本作品采用知识共享署名-非商业性使用 2.5 中国大陆许可协议进行许可。 专业交流 模板超市 设计服务 NordriDesign中国专业PowerPoint媒体设计与开发 本作品的提供是以适用知识共享组织的公共许可（ 简称“CCPL” 或 “许可”） 条款为前提的。本作品受著作权法以及其他相关法律的保护。对本作品的使用不得超越本许可授权的范围。 如您行使本许可授予的使用本作品的权利，就表明您接受并同意遵守本许可的条款。在您接受这些条款和规定的前提下，许可人授予您本许可所包括的权利。 查看全部… 基于数据密集型计算的作业管理系统的研究与设计 高能物理研究所计算中心 阚博文 石京燕 王新华 高能物理研究所计算中心 DYB-DIOM 目录 背景 研究问题 系统构架 消息队列机制 作业代理存储策略 “推拉”架构设计 批作业提交 数据库设计 容错机制设计 总结 背景 数据密集型计算处理的是海量的、分布性的数据，其数据量一般是TB甚至是PB级别的 数据密集型计算，所需要的资源、分析能力和理解能力都必须建立在海量、分布、异构的数据管理平台上 数据密集型计算要求海量存储、高性能 计算平台上实现，无法在本地提供服务 Web服务通信问题 处理异构数据问题 系统的高可扩展性和兼容性 “大亚湾反应堆中微子实验”是中微子振荡实验。根据估算，实验将会产生长4PB的物理