基于并行处理技术的EAST分析数据库的设计.pdfVIP

基于并行处理技术的EAST分析数据库的设计 潘捷，王华忠，夏登超 (中国科学院等离子体物理研究所，安徽合肥230031) 摘要。分析数据库是托卡马克核聚交实验采集系统中一个数据分析计算处理系统，它的功能是根据 实验人员的需求，分析计算处理实验采集的数据，实时地向所有实验人员发布处理结果。分析数据 库技术已经成功应用在H：f．7实验当中。EAST托卡马克2009春季实验以60秒长脉冲放电作为实 验目标，实验数据处理量较过去有大幅度增加，EAST分析数据的设计重点也由处理物理量的算法 扩展到计算科学领域．目前并行处理技术已经成为计算科学领域的一个重要发展方向．根据EAST 分析数据库的实时性要求和处理规模，并考虑处理成本和算法设计的可编程性，我们在EAST分析 数据库设计中引入OpenMP共享存储并行处理技术，明显提高了EAST分析数据库的处理效率。 关键字lEAST托卡马克，OpenⅧ，分析数据库 1． 引言 EAST(The Advanced Tokamak)是中国科学研究院等离子体物理 ExperimentalSuperconductive 研究所自行研制的世界首座全超导非圆截面托卡马克实验装置，在2009年春季实验中已完成了60 秒长脉冲放电的实验目标。在实验过程中每一炮放电结束，实验人员都需要立即分析实验数据，并 根据分析结果设置下一炮放电的控制参数，为了满足实验人员对于等离子体密度、内能等物理量的 需要，分析数据库必须及时将EAST数据采集系统获得的原始数据进行分析处理，使之成为具有物 理意义的实验分析数据。托卡马克长脉冲放电实验是实验发展的趋势，它的控制更加复杂，数据量 更加庞大，需要处理的物理量也更多，这对分析数据库的计算性能提出了新的要求。本文针对这一 要求，在原有Hr-7托卡马克装置的分析数据库系统基础之上，建立了EAST分析数据库系统，并 引入共享并行处理技术OpenMP，经过试运行证明系统稳定，计算性能得到明显提高． 2． 分析数据库的设计 EAST分析数据库系统是EAST数据管理系统中的一个子系统，作为实验原始数据的补充。由 分析数据库处理后的实验数据具有更直观的物理意义，是物理人员经常用来分析、指导实验的重要 工具．分析数据库服务器完成数据分析处理、压缩、存储、数据访问等重要功能，提供与原始数据 统一的存储格式，能够透明地通过看图软件进行访问。 2．1系统结构 分析数据库系统在整个实验系统中的位置如图(图1)所示： 图1EAST实验系统图 189 在实验过程中，每一炮放电前由实验总控系统向数据采集控制系统【l】传递采集参数，采集控制 系统接收到采集参数后触发各采集子系统进行数据采集。各采集予系统在采集数据的同时压缩、传 送数据到数据服务器进行存储，在完成采集任务后向采集控制系统返回完成状态。当采集控制系统 收到所有采集子系统的完成状态后向实验总控系统返回一个就绪状态，提示实验总控系统可以进入 下一炮的放电。与此同时采集控制系统还要触发分析数据库计算该炮分析数据，分析数据库在计算 处理过程中需要根据索引服务器提供的索引信息查找所需的原始数据的存储位置，从存放原始数据 的数据服务器中提取所需数据用来计算，最后将处理结果压缩以文件形式存储在本地。索引服务器 同样涵盖分析数据库处理结果的索引信息，当客户端软件需要查看某个信号量时，无论是原始信号 还是处理后信号，都需要通过索引服务器查找数据存放位置，从存放数据的服务器中提取数据并最 后显示出来． 2．2软件设计 分析数据库软件设计的主要部分是分析处理进程的设计，同时为了提供数据服务与存储转发功 能，还需要GATE进程和TRANS进程的支持【2】，这里主要介绍分析处理进程的设计。 图2分析数据库分析处理程序设计图 如图2所示，主线程连接索引服务器获取本轮实验的信号索引并存储于全局变量中， 然后建立Socket套接字监听来自采集控制系统发送的触发信号，并创建一个处理线程接收触发信 号，触发信号主要提供炮号信息，处理线程在接收到触发信号后，一方面创建新的处线程等待下一 炮触发，一方面开始判断炮号是否已经接收并处理过，对于新炮号则进行各信号的处理，然后该炮 计算线程结束，否则计算线程立即结束。该程序在Linux环境下