实时计算平台1.pptxVIP

大纲我们现在的计算平台我们平台上的业务我们将来要做的工作

大纲我们现在的计算平台我们平台上的业务我们将来要做的工作

实时计算平台1支持毫秒级别至秒级别的计算延迟需求高可靠性，高可伸缩性，高可扩展性支持DAG描述的流式作业支持已在线运行作业DAG修改与升级Per-Record的计算模式与底层架构Streaming模式支持多语言扩展

实时计算平台1机群规模：500+-1000机群QPS：10M--100Mqps延迟保证：99.9%50ms-在线系统统一平台服务众多（20+）业务方

实时计算平台2支持十秒级别至分钟级别的计算延迟需求高可靠性，高可扩展性支持DAG描述的流式作业/Queue-Worker模型作业具备Transaction属性，保证计算数据的不重不丢基于增量/小批量的计算模式与底层架构Streaming模式支持多语言扩展

实时计算平台2机群规模：500+-1000支持千级worker并发，百级业务流并发多级Master架构设计控制流与数据流分离统一资源层

大纲我们现在的计算平台我们平台上的业务我们将来要做的工作

实时计算平台1广告计算平台主要需求：真正的实时需求：百毫秒级别的延迟指标灵活的拓扑变化：新增用户数据业务流，支持各种策略实验高稳定性：跨机房故障时，优雅的服务降级

实时计算平台1检索端更新数据流主要需求：真正的在线需求：在线调整与升级，稳定灵活的拓扑变化：新增用户数据业务流，支持各种策略实验数据流频繁调整：分流，备份

实时计算平台2离线/在线云视频转码需求主要需求：视频分段并行转码；潜在资源需求量大，短期无预算上线规模：worker并发数k级别业务收益：提升时效性，利用空闲资源

实时计算平台2业务日志后端计算主要需求：分析前端Server日志，计算统计报表，精确计算步骤较多：流式join，filter，aggregation，入库业务收益：提升报表时效性（5hour+-30min-）

大纲我们现在的计算平台我们平台上的业务我们将来要做的工作

现在/将来的工作业务推广统一资源层提升易用性

谢谢！