数据仓库与大数据融合的探讨 - 信息通信学术期刊网.pdfVIP

电力信 息化 专栏 电力信 息化 专栏 数据仓库与大数据融合的探讨 于 鹃 （ 中国水利 水 电第三 工程局 有 限公 司 西安 710016 ） 摘 要 ：针 对 传 统 企 业 对 非 结 构 化 数 据 缺 乏 有 效 利 用 的 问题 ，探 讨 了基 于 数 据 仓 库 与 大 数 据 融 合 的企 业 大 数 据 解 决 方 案 。 根 据 数 据 仓 库 建 设 理 论 和下 一 代 企 业 级 数 据 仓 库 架 构 ，利 用 Hadoop 技 术 进 行 非 结 构 化 数 据 的收 集 、处 理 及 存 储 ，通 过 与传 统 数 据 仓 库 和 BI 工 具 共 同协 作 ，解 决 企 业 大 数 据 应 用 困难 的 问题 。 数 据 仓 库 与 大 数 据 技 术 的融 合 解 决 了传 统 企 业 数 据 处 理 的 障碍 ，从 而 推 动 大 数 据 项 目的实 施 。 关 键 词 ：大 数 据 ；数 据 仓 库 ；Hadoop ；架 构 doi： 10.11959／j .issn.1000-080 1.20 15066 Discussion on Integration of Data Warehouse and Big Data Yu Juan （Sinohydro Bureau 3 Co.， Ltd.， Xi ’an 7 100 16， China） Abstract： In view of the traditional enterprise couldn ’t use such unstructured data efficiently， a big data solutions based on integration of data warehouse and big data was discussed. Based on the theory of data warehouse construction and architecture of the next-generation EDW， Hadoop was used to collection， processing and storage for unstructured data. By big data technology work together with traditional data warehouse and BI， to help enterprises to solve difficulties that applied. Integration of data warehouse and big data can resolve the difficulty on data processing and promote the implementation of big data projects. Key words： big data， data warehouse， Hadoop， architecture 很 多 人 以 为 数 据 仓 库 就 是 “数 据 库 的集 合 ”或 者 是 更 1 引言 大 规 模 的数 据 库 ，其 实 数 据 仓 库 是 利 用 已有 数 据 库 ，对 其 数 据 库 技 术 从 诞 生 到 现 在 ， 已形 成 了成