阿里巴巴分布式流数据实时和持续计算(强琦).pdf

分布式流数据实时与持续计算分布式流数据实时与持续计算 强琦 hic2011 2011.12.3 提纲提纲 • 背景背景 • 目标 • 传统方案与业界传统方案与业界进展进展 • 设计理念(重点) • 技术架构 •• 要点要点 • 例子 • 系统边界 • 计划计划 背景背景 • 应用背景应用背景 – 数据量急剧增加 – Web 1.0web 2.0, publicego net –– 电子商务电子商务、、移动互联网移动互联网、、移动支付移动支付 – 欺诈、风控对海量交易实时性 – 用户体验的个性化和实时性 – 由点到面由点到面 • 实时搜索、个人实时信息服务、SNS等 背景背景 • 技术背景 – MapRed