- 1、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。。
- 2、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
- 4、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
- 5、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们。
- 6、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 7、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
数据整合平台使用指南
数据整合平台
使用指南
2019年7月
数据整合平台使用指南
目录
1前言3
2产品架构4
3数据资源5
3.1数据驱动管理5
3.2数据连接管理6
3.3元数据管理9
3.4创建ODS表10
3.5血缘分析13
4转换任务15
4.1变量设置任务16
4.2数据抽取任务17
4.3执行SQL任务22
4.4存储过程任务23
4.5外部命令任务25
4.6导出文本任务26
4.7发送邮件任务26
4.8执行KETTLE任务29
JS31
4.9执行语句任务
4.10WEB服务任务32
4.11批量创建任务35
4.12数据剖析任务35
4.13FTP文件任务42
5作业流程44
5.1作业流程管理44
5.2创建作业流程45
5.3作业流程组件47
6调度计划50
7执行监控52
8日志查询57
8.1作业批次查询57
8.2日志明细查询57
8.3计划执行日历58
9系统管理59
9.1用户管理59
9.2菜单管理59
9.3角色管理60
1
第页
数据整合平台使用指南
9.4环境变量60
9.5日志清除61
9.6资料库导出61
9.7资料库导入62
9.8回收站62
9.9用户操作日志62
9.10警报62
2
第页
数据整合平台使用指南
1前言
经过多年的信息化建设,各企事业单位都积累了海量的数据,并且这些数据还正以指数级增长,企业迫切需要对这些数
据进行挖掘、清洗和处理,找出其背后的规律,准确把握企业的运营情况,从而进行科学决策,如果没有科学的数据分析和
统计作依据,各项管理和决策就如同空中楼阁,虚而不实,然而在数据应用中,通常都会面临各种问题,比如:
各个业务系统相互独立,形成多个信息孤岛,数据共享存在困难;
业务系统中数据未得到有效整合,难以支撑数据的综合分析;
数据查询分析需要在多个系统中交叉进行,查询的效率及准确性低,对业务系统的负荷较高;
数据质量差,存在大量的“脏”数据;
数据不一致程度高,数据理解差异、口径不一等导致统计报表不一致;
历史数据遗失情况常见,对历史数据的分析难以进行;
未来数据的增长趋势明显,数据查询日趋复杂,业务系统难以适应企业的不断发展;
基于上述问题,为全面提升企业数据资源的开发利用水平,构建统一、集成、标准化的企业级数据平台势在必行。但是,
在企业级数据平台的构建过程中,由于业务系统众多,数据来源复杂,其数据内容、数据格式
文档评论(0)