- 1、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。。
- 2、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
- 4、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
- 5、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们。
- 6、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 7、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
查看更多
⾼性能,⾼可⽤,可扩展
在途⽜旅游⽹的实际经验
2014.4.26
• ⼤数据
• 搜索
• 价格计算
途⽜⼤数据模型架构
传统数据模型架构:需求驱动
• 需求驱动模型架构:
随需求变化快,模型的重构性低,⼤数据
源表1 过渡表1 多维 的处理和计算差性能
模型1
多维
源表2 过渡表2
模型2
途⽜业务特点:变化⾮常迅速,对数据的需求变化也⾮常快;
途⽜模型架构:数据驱动的模型架构,⾮需求驱动的模型架构;
途⽜⼤数据模型架构
途⽜数据模型架构:数据驱动
原始数据系统 业务流 数据流 多维模型
途⽜核⼼数据模型
特点:
• 途⽜核⼼层是基于公司的业务流设计的,不随需求的变动⽽变动;
• 需求的变动仅仅影响多维层模型;
• 模型架构复杂性低,重构性强;
途⽜⼤数据模型架构
业务流落地成数据流案例
途⽜⼤数据平台演变
⽼数据平台
SSRS SSAS SSIS
SQLSERVER BI
⽤户⾏为系
订单系统 产品系统 …… 评论系统
统
• 数据架构:服务器架构伸缩性差, 1+1 的服务器搭建模式(1台数据仓库服务器+1台报表
服务器);
• 数据存储:数据量不到1T,没有包含⽤户⾏为数据;
• 系统并发:并发⽐较差,⼏⼗个⼈的并发,系统就会卡;
• 数据处理:处理时间⻓,每天数据处理需要8-10个⼩时;
• 数据运⾏:系统负荷⾼,系统异常频发;
离线架构– 物理架构
NameNode NameNode
⾮关系型数据源
⾮关系型数据源 DataNode DataNode … DataNode
Mysql集群
DataNode DataNode DataNode
…… …… ……
DataNode DataNode DataNode
其他数据源 Rack1 Rack2 RackN
⼤数据查询
您可能关注的文档
最近下载
- 水利水电工程单元工程施工质量验收评定表填表说明与示例(样表)2025年版(全).doc VIP
- 人教PEP版(一起)(2024)英语二年级上册英语Unit 3 Helpful hands 教案.docx
- 2025第三届全国技术技能大赛江西选拔赛制造业数字化转型赛项技术方案.pdf VIP
- 实验员考试试题及答案.doc VIP
- 标准起草编制说明范文.pdf VIP
- CRISPR-Cas9基因编辑技术.pptx VIP
- (高清版)B-T 17421.1-2023 机床检验通则 第1部分在无负荷或准静态条件下机床的几何精度.pdf VIP
- 2025年纪检监察应知应会试题库及参考答案.docx VIP
- 球馆充值协议书范本.docx VIP
- 2022年9月17日全国事业单位联考D类《综合应用能力》小学真题及答案.pdf VIP
原创力文档


文档评论(0)