企业数据集市建设要点分析.pdfVIP

. 企业数据集市建设要点分析 高并发、低延迟场景下，企业如何建设敏捷高效的数据集市 Word 范文 . 目录 一、数据集市的发展态势 3 二、数据集市与数据仓库的对比 . 4 三、数据集市的项目建设方案及技术点 5 四、数据集市建设所需支持及面临的风险 7 五、数据集市项目验收 9 Word 范文 . 随着大数据技术的发展， 数据量急剧增长， 数据的分析挖掘工作也变得越来越重要。 在这背后， 数据仓库的建设尤为重要，通过数仓，可以为数据分析人员提供全面的数据和计算能力。 数据仓库包括原子级别的数据和轻度汇总的数据， 是面向主题的、 集成的、 不可更新的 ( 稳定性 ) 、 随时间不断变化（不同时间）的数据集合，用以支持经营管理中的决策制定过程。但是数据仓 库在高并发、快速响应的场景下具有很大的局限性，无法满足海量投资者数据查询服务需求。 数据集市，也叫数据市场，是企业级数据仓库的一个子集，是为满足特定的部门或者用户的需 求，只面向某个特定的主题，按照多维的方式进行存储，包括定义维度、需要计算的指标、维 度的层次等，生成面向决策分析需求的数据立方体，提升数据查询的效率。 本文围绕着数据集市的需求、架构、方案等方面进行了问题的讨论，对于大家了解和应用数据 集市非常具有参考价值。 一、数据集市的发展态势 Q1：当前，金融行业中在什么场景下需要建设数据集市？是否该启动数据集市建设？数据集市 的建设是由哪些因素触发的？ A1-1 ： 数据集市 (Data Mart) ，也叫数据市场，是企业级数据仓库的一个子集，是为满足特定的部门 或者用户的需求，只面向某个特定的主题，数据集市存储为特定用户预先计算好的数据，从而 满足用户对性能的需求。数据集市可以在一定程度上缓解访问数据仓库的瓶颈。 数仓解决海量数据统计分析，低用户并发，大量计算。 数据集市低延时和高并发查询的情况下具备足够的支撑能力，可以 7 ×24 对外提供数据服务， 且不影响原有数据仓库统计分析应用的正常运行。大量生产数据的预处理在数仓进行，数据集 市接收数仓预处理后的数据。 数据集市是对数仓的补充，灵活、快速响应业务，支持用户部门自行定制数据进行统计分析， 支持高并发、性价比较高。 A1-2 ： 当用户对大量数据的实时性要求非常迫切，而数据仓库无法满足时，就需要有针对性的对这些 数据进行处理，提升存储和计算的效率，这就需要建立数据集市，通过对数据的预处理，提升 数据查询处理效率。 Q2：企业建设数据集市的动力来自哪里？ 建设数据集市对金融行业客户有何现实意义？ A2： Word 范文 . 数据集市是数据仓库的一个重要补充，满足客户对数据的即时性要求；传统数仓往往比较重存 储，且为了保持数据完整性，而严格按照范式要求保存数据，从而导致计算量很大，时效性较 低。建立数据集市，有助于进一步发挥数据价值，因其面向