- 1、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。。
- 2、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
查看更多
2017 Postgres大象会 PGConf.CN 2017
苏宁citus分布式数据库应用实践
嘉宾:陈华军
公司:苏宁云商
邮箱:chjischj@163.com
2017 Postgres大象会 PGConf.CN 2017
目录
• 业务场景
• Citus介绍
• 部署方案
• 踩过的坑
2017 Postgres大象会 PGConf.CN 2017
业务场景
业务系统1
抽取
Spark任务 业务系统2
cognos 智能分析 …
…
更新
DB2
当时的数据库(DB2)
报表计算 明细表 ✓ 硬件:24C/256GB/4800GB SSD
报表 ✓ 平时:45% CPU利用率
✓ 大促:80%+ CPU利用率(不堪重负!)
维表
2017 Postgres大象会 PGConf.CN 2017
DB负载在哪里?
明细更新
✓ 每5分钟更新约10张明细表(要求在1分钟内完成)
✓ 最宽的表400字段,2.5KB/行 ✓ 单表1000w记录
✓ 最宽的表每次更新约10w记录,总体约30w ✓ 单行400字段,2.5KB
✓ 保留最近数天数据(最宽的表约1000w数据,总体约3000w) ✓ 5k/s随机更新
报表计算
✓ 每5分钟计算30+报表(要求在2分钟内完成)
✓ 200次/min 明细表聚合运算
✓ 每个报表平均执行14次明细表集合查询
报表查询/ 明细查询
✓ 要求并发度30
✓ 要求RT3秒
2017 Postgres大象会 PGConf.CN 2017
年内负载还会增加10倍
5w+/s 明细表随机更新
3亿明细表数据
5k/s 明细表随机更新
3000w 明细表数据
Scale Out + 去DB2
2017 Postgres大象会
文档评论(0)