杭银消费-新一代企业级大数据体系的规划建设与思考.docxVIP

企业级大数据体系规划、建设与思考2024年7月

企业级大数据体系

规划、建设与思考

2024年7月

n 股东构成

n 股东构成

n 业务趋势

n 业务趋势

信息系统发展历程资产：57亿交易数：1093万资产：146亿交易数：3825万资产：206亿交易数：1.1亿资产：350亿交易数：1.89

信息系统发展历程

资产：57亿

交易数：1093万

资产：146亿

交易数：3825万

资产：206亿交易数：1.1亿

资产：350亿交易数：1.89亿

资产：410亿交易数：3.4亿

资产：490亿交易数：4.58亿

分析系统与交易系统分离

数据量增长，使用

MPP支持分析系统

租赁费用高，部署私有MPP

OLTP历史数据迁移，许可证费用高，部署多

数据大量复制、重复存储，存储资源浪费，处理时间长，任务效率低，需要建设统一存储；计算资源利用率低，需要构建存算分离架构体系；

OLTP单元化建设，多机房部署，数据总线支持跨机房数据同步；

数据总线支持OLTP应用实时数据同步

套私有MPP；

使用数据总线，提升传输效率，提供升维数据

读写分离

数据流体系-数据流向

数据流体系-数据流向

大数据应用架构—目标OLAPOLTP风控应用应用系统1应用系统nQuickBIHue分析应用API流数据库日志数据集市1数据仓库数据总线数据采集数据查询数据传输流式发布数据集市n云