互联网电商离线大数据分析最佳实践.pdf

互联网电商离线大数据分析最佳实践 技术创新，变革未来 场景描述 电商网站销售数据通过大数据分析后将业务指标数据在大屏幕上展示，如销售指标、客户指标、销售排名、订单 地区分布等。大屏上销售数据可视化动态展示，效果震撼，触控大屏支持用户自助查询数据，极大地增强数据的 可读性。 适用场景  电商网站数据看板  全国/全球业务态势分析  互联网金融风险数据监控 行业标签 ：互联网、新零售、金融、通用 产品标签：MaxCompute、RDS、ECS、Dataworks、DataV、VPC、EIP等 实现架构 架构说明：  用户订单等数据同步到MaxCompute。  通过Dataworks对原始数据进行处理并 形成开放API。  需要展示的结果数据以API的形式通过 DataV在大屏上展示。 MaxCompute产品介绍 MaxCompute向用户提供了丰富的大数据开发工具、完善的数据导入导出方案以及多种经典的分布式计算 模型。能够最快速地解决用户海量数据计算问题，有效降低企业大数据计算平台的总体拥有成本，提高大 数据应用开发效率，并保障数据在云计算环境的安全。 产品特点 产品架构 ▪云原生服务架构： ▪全托管的Serverless、多租户模式，作业级别的自动弹性伸缩，免平台运维及配置调优 MaxCompute生态工具(Dataworks、Studio、QuickBI、3rd Party工具) 势。 ▪支持按作业付费、预占计算资源付费、打包套餐等多种付费方案，满足最灵活的客户购 MaxCompute 买需求。 ▪多功能： SQL MR 图计算 Spark 交互式 ▪提供SQL/MR/Spark/机器学习/图计算等多种计算能力，避免为计算而搬数据。 New SQL Java Python ▪高性能计算引擎： ▪随着数据规模的增加，性能线性增长，超越竞品的性能优势。 MaxCompute Engine(通用并行计算框架) ▪安全的数据平台： Fuxi(资源管理及任务调度) 全局元数据 ▪原生的多租户系统，以项目进行隔离，所有计算任务在安全沙箱中运行，支持 ACL+Policy+Label细粒度授权，支持数据KMS加密，支持行为审计 (即将发布)。 Pangu(大规模分布式存储服务) ▪生态开放： ▪高度兼容Hive、支持原生的Spark应用、支持Python生态(PyODPS)、第三方BI工具。 大规模弹性资源池 ▪企业级管理能力： ▪完整的批量(Tunne