专题培训之数据输.pptVIP

专题培训 之 数据传输 目录 数据传输作用范围 数据传输原理 数据传输配置 数据传输安装 查看数据传输的运行情况 数据传输作用范围 数据最多需要在总部，分区总部、门店、前台4级服务器之间传送 前台和后台服务器之间 使用数据库作业 前台作业获取门店后台商品、卡信息等数据 门店后台作业获取销售流水、收银员操作信息 总部分区总部之间，门店和分区总部之间 使用数据下载，上传组件在EnjoyTaskServer运行 都在下级运行，传输策略都在下级配置，传输记录都在下级记录 不能跨级传送 数据传输原理1 记录需要传送的数据的一列或者多列的值 最多8列组合定位数据 可用触发器、存储过程、程序来记录 数据修改的先后次序决定传输的先后次序 下级按时间的先后顺序一条一条获取数据 根据一列或者多列获取原始的数据 把数据下载到下级（下载），并且生成SQL命令 在下级的数据库里执行SQL命令 记录每次执行的状态（若失败则会重传） 把数据上传到上级（上传），并且生成SQL命令 在上级的数据库里执行SQL命令 记录每次执行的状态（若失败则会重传） 数据传输原理2 下级数据传输组件通过web服务获取上级的数据，不直接链接上级的数据库 下级数据传输组件直接链接下级的数据库 相当于客户机服务器模式 数据传输原理图 上级原始数据 2修改 1删除 3新增 记录对数据的修改 Tbc_to_lowlevel 序号由小到大 记录下载的状态 Tbc_down_status 序号由小到大 下级目的数据 1 2 3 第一步1由业务系统执行 第二步2、3由数据传输组件执行 数据传输内部优化措施 上传时 对新增的数据传输类型，如果一次新增的数据大于10条，则内部使用BCP导入数据（上传BCP文件到上级，在上级执行BCP导入数据库） 最多可以启用3个上传组件同时上传不同类型的数据，同时上传的数据不能有先后的关系，即要求是互不影响的独立数据（比如日结数据和实时监测数据）。启用3个组件上传数据要在配置文件中增加配置，且要启用插件。 下载时 对于更新的数据传输类型，如果一次更新的数据大于10条，则内部使用BCP导入下级系统Tempdb库中的临时表，然后执行从Tempdb临时表到正式表的数据更新（商品ABC修改使用此方式）。 最多可以启用2个下载组件同时下载不同类型的数据，同时下载的数据不能有先后的关系，即要求是互不影响的独立数据（比如卡和商品数据）。启用2个组件上传数据要在配置文件中增加配置，切要启用插件。 数据传输配置1 记录数据传输标记 用触发器产生 用存储过程产生 用程序产生 级联上传、级联下载 数据传输配置2 配置数据传输策略 序号 不能重复 策略描述 不能重复 方向 上传、下载 是否有效 具体命令序号 决定SQL命令的执行先后，很重要 操作类型 增加、删除、更新、执行、查询增加 数据传输配置3 命令 在操作类型为增加、删除、更新时，为要操作的表名； 在操作类型为执行时，为需要操作的sql命令；命令最多可以带8个参数@p1,@p2, @p3,@p4, @p5,@p6,@p7,@p8,分别对应数据标记的8个值。即表tbc_to_lowlevel/tbc_to_highlevel的c_value1---c_value8字段的值。 在操作类型为查询增加时，为一个查询语句，可以带8个参数，同上 辅助信息 在操作类型为更新时，为要更新的列名（比如c1,c2,c3）。 在操作类型为查询增加时，为需要增加数据的表名。 EnjoyTaskServer.exe.config配置1 appSettings !--是否写日志(是/否)-- add key=WriteLog value=否 / !--总部和分店传输数据-- !--下级店代码-- add key=ClientCode value=1106 / !--上级店代码-- add key=HighLevelCode value=11 / !--下级书库连接串-- add key=DTSCONSTR value=User ID=mis_user;password=mis_user; Data Source=00;Tag with column collation when possible=False; Initial Catalog=enjoy_store;Use Procedure for Prepare=1; Auto Translate=True;Persist Security Info=False; Provider=SQLOLEDB;Workstation ID=;Use Encryption for Data=False;Packet Size=4