物化查询表和多维群集在大数据查询中的应用.pdfVIP

１２２ 物化查询表和多维群集在大数据查询中的应用 ＡｐｐＩｉｃａｔｉｏｎ ｏｆ ＭＱＴ ａｎｄ ＭＤＣ ｉｎ Ｌａｒｇｅ Ｄａｔａ Ｑｕｅｒｙ 王昀海 何利力 （浙江理工大学信息学院，浙江 杭州 ３１００１８ ） 摘 要 随着互联网与信息技术的发展，企业使用的数据库的数据量呈现了爆炸式的增长，大部分企业的数据都已进入海量的 时代，如何对海量的数据进行查询优化越来越受到企业的重视。通过对烟草行业使用的数据库 ＤＢ２ 进行分析，将物化查询 表以及多维群集技术应用到企业数据库中，优化数据查询，提高企业的竞争力。 关键词：大数据查询， ＭＱＴ ＭＤＣ ＤＢ２ ， ， Abstract Ｔｈｉｓ ｐａｐｅｒ ｉｎｔｅｎｄｓ ｔｏ ｍａｋｅ ｔｈｅ ａｐｐＩｉｃａｔｉｏｎ ｏｆ ＭＱＴ ａｎｄ ＭＤＣ ａｐｐＩｙ ｔｏ ＤＢ２ ｄａｔａｂａｓｅ ａｎｄ ｏｐｔｉｍｉｚｅ ｔｈｅ ｄａｔａ ｑｕｅｒｙ ａｎｄ ｔｈｅｎ ｉｍｐｒｏｖｅ ｔｈｅ ｃｏｍｐｅｔｉｔｉｖｅｎｅｓｓ ｏｆ ｅｎｔｅｒｐｒｉｓｅｓ． Keywords:Ｉａｒｇｅ ｄａｔａ ｑｕｅｒｙ,ＭＱＴ,ＭＤＣ,ＤＢ２ 现今越来越关注如何对海量的数据进行有效的管理和利 的。即 ＭＡＩＮＴＡＩＮＥＤ ＢＹ ＳＹＳＴＥＭ。当创建系统维护类型的 用，传统数据库发展的一个瓶颈就是在海量级数据的今天如何 ＭＱＴ 时，表数据的刷新方式是 ＲＥＦＲＥＳＨ ＩＭＭＥＤＩＡＴＥ 或者 提高数据的利用效率。物化查询表以及多维群集技术是 ＤＢ２ 数 ＲＥＦＲＥＳＨ ＤＥＦＥＲＲＥＤ。通过 ＲＥＦＲＥＳＨ 关键字可以指定如何维 据库优化的两种手段。 护数据。 的意思是，表中的数据可以在任何时候通过 ＤＥＦＥＲＲＥＤ 1 物化查询表（ QT ） ＲＥＦＲＥＳＨ ＴＡＢＬＥ 语句来刷新。不管是 ＲＥＦＲＥＳＨ ＤＥＦＥＲＲＥＤ １．１ ＭＱＴ 的含义 还是 ＲＥＦＲＥＳＨ ＩＭＭＥＤＩＡＴＥ 类型的系统维护的 ＭＱＴ，对它们 使用物化查询表（ ）是一种可以明显的缩短查询响应时 的 、 或 操作都是不允许的。但是，对于 ＭＱＴ ｉｎｓｅｒｔ ｕｐｄａｔｅ ｄｅＩｅｔｅ ＲＥ- 间的数据库优化的方法。ＭＱＴ 的定义依查询结果而定。可以将 ＦＲＥＳＨ ＩＭＭＥＤＩＡＴＥ 类型的系统维护的 ＭＱＴ ，可以通过对底层 看成一种物化视图，因为 中的数据都是来自一个或 表的更改（即 、 或 操作）来进行更新。 ＭＱＴ ＭＱＴ ｉｎｓｅｒｔ ｕｐｄａｔｅ ｄｅＩｅｔｅ 者多个基本表。其区别在于生成和存储 ＭＱＴ 数据的方法。一般 用户维护的 ＭＱＴ ，这种物化查询表中的数据是由用户维护 情况下视图的数据是每次在引用视图时通过对其所依托的主体 的。即ＭＡＩＮＴＡ ＩＮＥＤ ＢＹ ＵＳＥＲ。只有 ＲＥＦＲＥＳＨ ＤＥＦＥＲＲＥＤ 执行查询而生成的；数据位于视图所引用的底层基本表中。