SI Toolkit培训手册课件.pptx

SI Toolkit数据集成与交换工具整体架构使用场景安装部署功能介绍整体架构整体架构交换节点（ SI worker ）数据路由流程控制状态监控执行作业执行转换作业控制转换控制日志查询作业调度节点状态作业状态吞吐状态转换状态交换工具（ SI Studio ）监控系统（ SI Monitor ）流程开发流程发布节点管理节点监控任务调度数据统计系统管理整体架构-交换节点交换节点（ SI worker ）数据路由流程控制状态监控执行作业执行转换作业控制转换控制日志查询作业调度节点状态作业状态转换状态数据路由-数据路由是交换节点的主要功能，用来执行发布到节点上的作业和转换，是数据交换的实施者。流程控制-流程控制是指提供用来远程操作控制交换流程的接口，通过这些接口的调用，可以对节点上的交换流程进行远程控制。状态监控-状态监控是指提供用来远程监控交换流程的接口，通过这些接口的调用，可以监控节点上的交换流程状态。整体架构-交换工具交换工具（ SI Studio ）流程开发流程发布流程开发-流程开发模块提供了大量的数据转换控件，通过组合这些转换控件，可以制定各种数据交换流程，包括数据库与数据库，webservice接口与数据库之间，文件与数据库之间，数据库与文件等各种形式的数据转换；开发好的转换流程可以以转换流程为单位存储成文件，也可以存储到资源数据库。转换流程可以组合成一个个定时任务，形成一个个作业流程。流程发布-开发好的转换流程和作业流程，将其发布到各个前置节点，由节点来执行转换流程和作业流程，一般情况下，都是将作业发布到节点，定时执行。整体架构-监控系统监控系统(SI Monitor )节点管理状态监控业务管理数据统计系统管理节点管理-将所有的节点都注册到监控系统中，监控系统只对注册到系统的节点进行监控。节点监控-根据注册的节点信息获取节点的状态信息，根据节点信息，可以列出节点下正在执行的转换和作业的信息列表，可以对这些转换和作业进行远程的启动，停止，删除以及查看执行日志的操作。任务调度-任务调度主要是对节点上的作业的定时信息进行修改，通过修改作业的定时信息，对任务的执行频率进行实时调度。数据统计-数据统计主要节点的工作状态，作业执行情况，节点吞吐量等信息。系统管理-系统管理主要是对监控系统提供系统支撑的信息进行相应的管理，包括用户管理和代码管理。使用场景使用场景前置机（节点）公安民政计生卫生工商税务质监资源库通过数据交换工具开发数据交换流程，将开发好的流程发布到对应节点上。通过数据交换监控系统，可以对节点上的数据交换流程进行控制和监控。可连上节点的任何一台电脑数据中心服务器使用场景-数据交换数据中心交换工具(SI Studio)作业节点监控系统(SI monitor)业务数据安装部署安装部署-环境要求SI worker最好是linux系统，并配置jdk1.7的java环境。SI Studio 根据习惯选择，可以是windows系统，也可以是linux系统，配置jdk1.7的java环境就可以使用。SI Monitor 需要部署tomcat7和jdk1.7的应用服务器环境，可以是linux，也可以是windows。安装部署-交换工具(SI Studio)删除资源库配置编辑编辑安装部署-交换工具(SI Studio)资源库配置安装部署-交换节点(SI worker)资源库配置 节点配置文件在安装文件下的pwd文件夹中，文件名为carte-config.xml，将里面的localhost改为节点机器的IP即可，端口默认为8080，可以根据自己情况进行修改。 一般在运行carte.sh之前需要更改其执行权限，使用命令chmod +x carte.sh进行授权，授权后通过命令 nohup ./carte.sh pwd/carte-config.xml 启动节点。安装部署-SI moniter监控系统(SI Monitor)为web应用系统，将发布包直接放到tomcat的webapps,修改发布包名字为ROOT，就可以了，如果数据库连接需要修改，可以在webapps\ROOT\WEB-INF\classes\com\sugon\resource\ jdbc.properties文件中修改，一般情况下不用修改。功能介绍SI Studio-主要功能SI Studio-转换流程开发-新建转换SI Studio-转换流程开发-创建DB连接创建日志信息的输出库连接，根据统计需要，需要连到交换工具的资源库SI Studio-转换流程开发-添加节点SI Studio-转换流程开发-流程开发SI Studio-转换流程开发-日志设置SI Studio-转换流程开发-执行及发布SI Studio-作业流程开发-DB连接SI Studio-作业流程开发-添加节