原创力文档- 1、原创力文档（book118）网站文档一经付费（服务费），不意味着购买了该文档的版权，仅供个人/单位学习、研究之用，不得用于商业用途，未经授权，严禁复制、发行、汇编、翻译或者网络传播等，侵权必究。。
- 2、本站所有内容均由合作方或网友上传，本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺！文档内容仅供研究参考，付费前请自行鉴别。如您付费，意味着您自己接受本站规则且自行承担风险，本站不退款、不进行额外附加服务；查看《如何避免下载的几个坑》。如果您已付费下载过本站文档，您可以点击 这里二次下载。
- 3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等，请点击“版权申诉”（推荐），也可以打举报电话：400-050-0827(电话支持时间：9:00-18:30)。
- 4、该文档为VIP文档，如果想要下载，成为VIP会员后，下载免费。
- 5、成为VIP后，下载本文档将扣除1次下载权益。下载后，不支持退款、换文档。如有疑问请联系我们。
- 6、成为VIP后，您将拥有八大权益，权益包括：VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 7、VIP文档为合作方或网友上传，每下载1次， 网站将根据用户上传文档的质量评分、类型等，对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
查看更多
货拉拉基于混合云的大数据SRE
体系建设实践
张伟伟大数据SRE负责人
深圳依时货拉拉科技有限公司大数据SRE负责人，负责大规模大数据
集群和相关生态系统的稳定性保障，以及参与大数据安全体系建设、
成本控制等方向的工作，有多年的跨云架构体系经验
背景和挑战
大数据SRE体系建设-成长期
大数据SRE体系建设-成熟期
后续规划
背景和挑战
货拉拉介绍
8+360950万68万
业务线国内城市月活用户月活司机
3+1000+10PB+20K+
IDC机器数存储量日均任务数
*注:2022年12月份公开数据
货拉拉大数据
大数据使命：驱动业务数智化，助力公司业务持续增长
货拉拉大数据
在线/实时离线
大数据跨云架构
大数据SRE体系
建设-成长期
大数据SRE体系建设
领先期
成熟期
成长期
•脚本化改造•自动化运维体系•智能运维体系
l基础设施维护•基础设施环境一致•成本控制
性
l稳定性•运维规范•大数据链路稳定性（实时/离线）•大数据全场景稳定性
•监控告警体系•基础设施安全治理
2021～202220232024～
业务高速增长业务高质量增长
背景和挑战-无监控告警
01核心组件挂了无感知，上游出问题才发现
02监控指标不全，核心指标缺失
03多套DC没有统一的监控能力
背景和挑战-运维方式原始
手动操作多业务增长快
01DC/集群/节点数量多02集群节点数量增长三倍，
并且新增了多个DC
手动操作多
03
大部分操作流程为手动，集
群搭建耗时1天，扩容半天
背景和挑战-易出故障
01开源组件15+，维护复杂度高
02多个DC以及环境的核心指标参数未统一
03无发布变更规范，无运维SOP，发布故障
文档评论（0）