原创力文档2025年金融行业后台运营部运营专员后台数据管理手册
第1章
基础架构与数据治理
1.1系统架构与数据流向说明
系统架构采用分层式微服务架构，底层为数据湖仓一体层，通过Kafka实时捕获全量交易流水与日志，上层为计算层（Flink流批一体）负责实时计算与T+1离线聚合，中层为数据中台层提供统一的数据服务API，顶层为业务应用层，确保从源头数据到最终报表的全链路可追溯。数据流向遵循“采集-清洗-存储-服务-应用”的闭环路径：系统每日凌晨02:00自动触发全量数据同步任务，将T+1日的前一日交易数据写入HDFS存储库，随后由Spark作业进行实
文档评论（0）