分布式任务调度平台设计方案.docx

分布式任务调度平台设计与高可用实施方案实例

(软件研发技术文档·数据与实例为据)

第一章调度目标与现状

本文档记录数据中台把散落在各服务的定时脚本收口到统一调度平台的做法。改造前370个批任务各用本地crontab,机器重启就漏跑、跑没跑没人知道,一次月末结算任务因机器宕机静默失败没人发现导致账单晚发一天。

目标三条:任务到点必触发不漏不重、失败自动重试并可观测、支持分片并行扛大数据量。改造后纳管任务从370个增长到1240个,月末结算类关键任务成功率从91%提到99.98%,漏跑事故归零,值班能一眼看到每个任务的成败。

表1-1调度平台前后对比

指标

改造前

改造后

收益

纳管任务

文档评论(0)

1亿VIP精品文档

相关文档