数据仓库基础Hive数据仓库技术93课件讲解.pptxVIP

河南工业职业技术学院数据仓库基础《Hive数据仓库技术》边青全

数据仓库的概念物品仓库数据仓库

数据仓库的概念比尔·恩门（BillInmon）在1991年出版的BuildingtheDataWarehouse一书中所提出的数据仓库定义被广泛接受。数据仓库（DataWarehouse）是一个面向主题的（SubjectOriented）、集成的（Integrated）、相对稳定的（Non-Volatile）、随时间变化（TimeVariant）的数据集合，用于支持管理决策（DecisionMakingSupport）。

数据仓库的概念

数据仓库的概念数据仓库是面向主题的传统数据库的数据组织面向事务处理任务，而数据仓库中的数据是按照一定的主题进行组织的。每个主题对应一个宏观的分析领域。数据仓库排除对于决策无用的数据，提供特定主题的简明视图。

商品推荐系统是基于数据仓库所构建出来的一个系统，它最关心的主题就是商品、客户。例如数据仓库的概念数据仓库是面向主题的

数据仓库的概念数据仓库是集成的数据仓库中的数据来自不同的数据源（Oracle、MySQL、文本文件或其他的文件系统），存储方式各不相同。把分散型的数据从原来的数据中抽取（E）出来，经过转换T，然后满足一定的要求，这样的数据才能进入（L）数据仓库。

数据仓库的概念数据仓库是相对稳定的数据仓库中保存的数据是一系列历史快照，不允许被修改。用户只能通过分析工具进行查询和分析。对数据仓库中的数据进行大量查询操作，但不涉及修改和删除操作，通常只需要定期加载、刷新。增在制定周期加载数据查大量查询删不支持改不支持

数据仓库的概念数据仓库是随时间变化的数据仓库内的数据并不只是反映企业当前的状态，而是记录了从过去某一时间点到当前各个阶段的数据。数据仓库中的数据是随着时间的推移逐渐增加的数据的集合。

数据仓库的主要技术计算的硬件环境、操作系统环境、数据库管理系统及所有相关的数据库操作、查询工具和技术、应用程序等各个领域都可以从并行的最新成果中获益。并行分区功能使得支持大型表和索引更容易，同时也提高了数据管理和查询性能及查询效率。分区

数据仓库的主要技术数据压缩功能降低了数据仓库环境中通常需要的用于存储大量数据的磁盘系统的成本，新的数据压缩技术也已经消除了压缩数据对查询性能造成的负面影响。数据压缩

数据仓库的应用智能客服在智能客服领域，数据仓库能够存储和处理大量的客户数据，包括用户行为、历史记录、偏好等。通过对这些数据进行深入分析，企业可以更好地了解客户需求，提供个性化的服务和产品推荐。数据仓库还可以通过对用户反馈数据进行挖掘，发现潜在的商业价值，优化企业的业务运营。

数据仓库的应用电商运营在电商运营中，数据仓库能够整合来自各个渠道的用户数据、销售数据和库存数据等。通过对这些数据进行分析，企业可以了解用户的购买行为和偏好，进行精准的推荐和营销活动。此外，数据仓库还可以帮助企业进行价格策略优化、库存管理、货源调度等，提高电商的运营效率。

数据仓库的应用物流配送在物流配送领域，数据仓库可以帮助企业整合来自不同渠道的数据，包括订单数据、物流数据、交通数据等。通过对这些数据进行深入分析，企业可以实现智能的路线规划和配送策略，提高配送效率，降低成本。此外，数据仓库还可以帮助企业预测货物损坏率、满意度等指标，提高服务质量。

数据仓库的优点数据仓库的分析数据一般按照时间周期分为日、周、月、季、年等类型数据。以日为周期的数据要求的效率最高，要求24小时内用户能看到数据分析结果。效率足够高数据仓库所提供的各种数据，要求是准确的数据，但由于数据仓库工作流程通常分为多个步骤，包括数据清洗、装载、查询、展现等，如果数据源有脏数据或者代码不严谨，可能导致数据失真，用户看到错误的信息就可能导致错误的决策，从而造成损失。数据质量高

数据仓库的优点扩展性主要体现在数据建模的合理性上，数据仓库中扩展出一些中间层，使海量数据流有足够的缓冲，不至于因为数据量增大很多就运行不起来。扩展性好

河南工业职业技术学院数据仓库基础《Hive数据仓库技术》边青全