原创力文档- 1、本文档共45页，可阅读全部内容。
- 2、原创力文档（book118）网站文档一经付费（服务费），不意味着购买了该文档的版权，仅供个人/单位学习、研究之用，不得用于商业用途，未经授权，严禁复制、发行、汇编、翻译或者网络传播等，侵权必究。
- 3、本站所有内容均由合作方或网友上传，本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺！文档内容仅供研究参考，付费前请自行鉴别。如您付费，意味着您自己接受本站规则且自行承担风险，本站不退款、不进行额外附加服务；查看《如何避免下载的几个坑》。如果您已付费下载过本站文档，您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等，请点击“版权申诉”（推荐），也可以打举报电话：400-050-0827(电话支持时间：9:00-18:30)。
查看更多
tencent大数据技术架构45
腾讯大数据技术架构
2014.09
1
整体架构简介
业务需求
基础平台架构
大数据时代的业务需求
用户规模 用户响应 并发请求
•千万 - 10亿 •秒 - 毫秒 • C10K - C10M
数据规模 机器规模
•TB - PB - EB •千 - 万 - 10万级
数据两大领域
数据生产域 数据消费域
•OLTP •OLAP
基础平台架构
用户接入 数据产品
SDK: 秒级监控/精准推荐/多
H5/iOS/Android… 维分析/…
O 业务逻辑 O
L L
实时计 离线计
TDF ：配置/ 日志/协议
T /路由/权限/容错/容灾 算 算 A
P … TRC TDW P
分布式存储 分布式存储
TDSQL/… HDFS/HBase/…
资源调度
Gaia
资源管理
关键技术概览
资源调度Gaia – 8800台
分布式数据库TDSQL – 高一致性
分布式计算 – 规模化、实时化、多样化
资源调度-Gaia
Gaia简介
Gaia核心特性
Gaia 打造大数据云操作系统
配置管理、单点容灾 +性能，扩缩容，资源利用率… ，统统不用操心！
将一组机器映射成一台逻辑上的大机器
为上层提供简单、统一的资源界面
资源调度和管理
Gaia
8
Gaia 核心特性
并行计算框架
BATCH
文档评论（0）