大数据处理架构介绍.ppt

大数据处理架构介绍 Statistics Big Data  大数据处理架构介绍 1.传统数据仓库的数据处理技术及思考 2.大数据环境下对于公共数据及行为数据的数据 处理技术 3.由传统数据仓库到大数据数据仓库的数据处理 实践思考及建议  传统数据仓库的数据处理技术 传统数据仓库的数据处理技术是什么? 从我参与某大型数据仓库项目经历为例来分享 暴统数据仓库的标准流程和 警镭鱼达和实践同样适用于数据平  传统数据仓库的数据处理技术概念定义 Employee ■ Reporting Repositories rtical Reporting Repositories Reporting Dw so Services Data Collection, Extraction, and Transport 回回■■ Servlce LIne 516May2016  传统数据仓库的数据处理技术业务定义 End Uscr Erw normet Feport Creation and Delvery Reporting Dala warehouse Collecton and Service Management nd Services 616May2016  传统数据仓库的数据处理技术逻辑定义 Slic Napoca M, sM IL I Reporting and OVSC/ SM 716May2016  传统数据仓库的数据处理技术物理定义 Customar Network XX TI Network HPPAPT Fuinware-pDaPe HIT molles App Ter IApps DB Tor egacy OuCNet VAN3 =题虫 g16May2016  传统数据仓库的数据处理技术规则定义 ETL: Generate Surrogate Keys ETL: Extract dato from Source System Create derived columns to summarize vew to for staging prior to support business requirements support business oading into requirements Create additional tables to warehouse support various activity type Level o Level 1 Level 2 system simple extract from the source Detailed data for reporting Summary data fo eporting 916May2016  传统数据仓库的数据处理技术设计定义 系系装信息 目标系转信息( larget Sister Infor 月设有理吧时月 卖型月末 table ane) t(arget) hle tae Data封月便是间 新不 5特每5专5 桥不删 刊网得特冬分得何消手 顶精匹分洲  传统数据仓库的数据处理技术开发实现 B2 Informatica 数据处理工具 数 前端展现 数据源 二二二 MuSA