DAT239SQLServer2005数据仓库方面的新功能.ppt

DAT239SQL Server 2005数据仓库方面的新功能 肖维 Technical Lead SQL Server Engine Access Method 微软有限公司 自我介绍 Access Method负责的技术范围 数据的访问 (B TREE) 数据的检查 (DBCC CHECK) 数据的修理 (DBCC REPAIR) 图像和文件的存储 (TEXT/IMAGE/VARCHAR) 数据的可靠性：事务管理 数据文件空间管理 (FILE SPACE) 临时数据库 (TEMPDB) 索引管理 (INDEX) 数据导入 (BULK INSERT) 今天的内容 SQL Server? 2005 在建造数据仓库方面的新功能 深入介绍索引视图，表分区 背景知识 最好有关系数据库的基本知识 不需要有数据仓库方面的专门知识 内容 讲座范围 性能增强　Performance 表分区 Partitioning 数据易于得到　Availability 增强的ＴＳＱＬ查询功能 讲座范围数据仓库的各种任务 今天内容包含： 数据导入 数据清理和转变 transformation 报表产生 Creating reports 填充 (Feeding) cubes 构造 Datamarts 不会讲到: 从不同源头取得数据 用工具实现数据转变 内容 讲座范围 性能增强　Performance 表分区 Partitioning 数据易于得到　Availability 增强的ＴＳＱＬ查询功能 数据仓库的性能增强 64-bit 分区视图(Distributed Partitioned Views) 索引视图 (Indexed Views) 包含其他列的索引 (INCLUDE Columns) INSERT 使用 OPENROWSET 表分区 (Partitioning) 分区视图 DPV 多个SQL Server实例上的分区视图 SQL Server 2000 和 2005 都有 在 SQL Server 2005 上， 有更多的并行操作 索引视图 性能增强 视图展开的缓存：缩短编译时间 许多情况下，索引视图维护时间减少 如何检测对你的应用有帮助？ 更多视图上可以建索引 SUM　和 COUNT_BIG – 没有　GROUP BY 某些自定义函数　scalar UDFs - T-SQL, deterministic, 没有数据库访问 索引视图 索引视图的使用有所进步，比如 索引视图有计算列C=A+B，查询有A+B 索引视图有“A between 10 and 20”，查询有 “A between 15 and 18” 索引视图有“A=B and C=10”查询有 “C=10 and B=A” 包含其他列的索引 比如: CREATE TABLE t1 (a INT, b INT PRIMARY KEY, c CHAR(2000)) CREATE INDEX i2 ON t1 (a, c) CREATE INDEX i1 ON t1 (a) INCLUDE (c) 包含其他列的索引 INSERT 使用 OPENROWSET SQL Server 2000 有这个功能 SQL Server 2005 增强： 允许直接从文件导入 支持大数据优化 BULK optimization 长远方向　 使用　OPENROWSET　的　INSERT 会取代 BULK INSERT INSERT 使用 OPENROWSET 比如– 过滤数据: INSERT INTO t1 WITH ( IGNORE_CONSTRAINTS, IGNORE_TRIGGERS ) SELECT c1, c2 FROM OPENROWSET ( BULK, ‘c:\data.txt’ )AS mytable ( c1, c2, c3 ) WHERE c3 10 INSERT with OPENROWSETSQL Server 2005 Improvements 比如转换数据：根据keytable 表的值转换 c3 INSERT INTO t1 WITH ….SELECT c1, c2, keys.d1 FROM OPENROWSET ( BULK, ‘c:\data.txt’) AS mytable ( c1, c2, c3 ) INNER JOIN User1.keytable AS keys ON ( c3 = keys.key ) 内容 讲座范围 性能增强　Performance 表分区 Partitioning 数据易于得到　Availability 增强的ＴＳＱＬ查询功能 表和索引的分区 好处 管理大数据更方便 性