DataWorks企业级核心场景解决方案.pptx

DataWorks企业级核心场景解决方案技术创新,变革未来

目录场景痛点DataWorks任务调度原理独享资源带来的价值购买方案注意事项DEMO

对于数据产出的企业级要求准时高效低成本

场景与痛点任务无法准时调起、任务无法按时完成!

DataWorks任务调度机制DataWorks以两层计算资源,按照用户预期(依赖关系、定时时间)运行任务。2月13日02:00DataWorks调度管控GateWay_1GateWay_3GateWay_4……下发节点:下发业务代码(SQL/MR/SHELL/Di脚本)MaxComputeEMR引擎:执行代码计算类任务……同步节点:启动同步线程,同步数据GateWay_1 GateWay_2GateWay_4……同步类任务计算类任务同步类任务消耗资源对象消耗资源对象GateWay_2正确的时间正确的代码正确的引擎

默认资源组所带来的问题共享资源无法支撑用户要求的并发量。2月13日02:00DataWorks调度管控GateWay_4……下发节点:下发业务代码(SQL/MR/SHELL/Di脚本)GateWay_1 GateWay_2 GateWay_3MaxComputeEMR引擎:执行代码计算类任务……同步节点:启动同步线程,同步数据GateWay_1 GateWay_2GateWay_4……计算类任务同步类任务消耗资源对象消耗资源

文档评论(0)

1亿VIP精品文档

相关文档