2024年数据仓库培训课件.pptxVIP

第一章数据仓库基础认知第二章数据仓库技术架构第三章数据仓库建模技术第四章数据仓库ETL开发第五章数据仓库数据治理第六章数据仓库未来趋势

01第一章数据仓库基础认知

什么是数据仓库？数据仓库是企业为了分析和报告而设计的数据库系统，它通过整合来自多个业务系统的数据，为决策提供支持。以某零售巨头2023年的数据为例，该企业每天产生约5TB的交易数据、200TB的用户行为日志和100TB的供应链数据。这些数据如果仅依靠传统的单体数据库进行处理，将会面临巨大的性能压力和存储挑战。数据仓库通过采用主题导向、集成化、非易失性和反映时间延迟的数据集合，能够有效地解决这些问题。与传统的OLTP（在线事务处理）系统相比，数据仓库更专注于OLAP（在线分析处理）场景，能够支持复杂的查询和分析需求。例如，在电商领域，传统的订单系统主要处理用户的下单、支付等事务性操作，而数据仓库则可以分析用户的购买行为、商品销售趋势等，为企业的营销策略提供数据支持。

数据仓库发展历程1970s数据仓库雏形IBMSystemR研究项目奠定了数据仓库的基础1990s黄金时代Informatica、SAP、Oracle等公司主导了数据仓库市场的发展2010s云原生时代Snowflake等云服务提供商推动了数据仓库的云原生化2020s湖仓一体DeltaLake、Hudi等技术实现了数据湖和数据仓库的融合

数据仓