高性能、高可用、高扩展@途牛教案.pdfVIP

  1. 1、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。。
  2. 2、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载
  3. 3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
  4. 4、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
  5. 5、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们
  6. 6、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
  7. 7、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
查看更多
⾼性能,⾼可⽤,可扩展 在途⽜旅游⽹的实际经验 2014.4.26 • ⼤数据 • 搜索 • 价格计算 途⽜⼤数据模型架构 传统数据模型架构:需求驱动 • 需求驱动模型架构: 随需求变化快,模型的重构性低,⼤数据 源表1 过渡表1 多维 的处理和计算差性能 模型1 多维 源表2 过渡表2 模型2 途⽜业务特点:变化⾮常迅速,对数据的需求变化也⾮常快; 途⽜模型架构:数据驱动的模型架构,⾮需求驱动的模型架构; 途⽜⼤数据模型架构 途⽜数据模型架构:数据驱动 原始数据系统 业务流 数据流 多维模型 途⽜核⼼数据模型 特点: • 途⽜核⼼层是基于公司的业务流设计的,不随需求的变动⽽变动; • 需求的变动仅仅影响多维层模型; • 模型架构复杂性低,重构性强; 途⽜⼤数据模型架构 业务流落地成数据流案例 途⽜⼤数据平台演变 ⽼数据平台 SSRS SSAS SSIS SQLSERVER BI ⽤户⾏为系 订单系统 产品系统 …… 评论系统 统 • 数据架构:服务器架构伸缩性差, 1+1 的服务器搭建模式(1台数据仓库服务器+1台报表 服务器); • 数据存储:数据量不到1T,没有包含⽤户⾏为数据; • 系统并发:并发⽐较差,⼏⼗个⼈的并发,系统就会卡; • 数据处理:处理时间⻓,每天数据处理需要8-10个⼩时; • 数据运⾏:系统负荷⾼,系统异常频发; 离线架构– 物理架构 NameNode NameNode ⾮关系型数据源 ⾮关系型数据源 DataNode DataNode … DataNode Mysql集群 DataNode DataNode DataNode …… …… …… DataNode DataNode DataNode 其他数据源 Rack1 Rack2 RackN ⼤数据查询

文档评论(0)

0520 + 关注
实名认证
文档贡献者

该用户很懒,什么也没介绍

1亿VIP精品文档

相关文档