SQL ServerHadoop 变身大数据解决方案.docVIP

SQL Server+Hadoop 变身大数据解决方案 关键字：SQL Server Hadoop 大数据 解决方案 　　【IT168 专稿】在数据库市场中，微软的SQL Server是最受关注的产品之一。在数据库知识网站DB-Engines每月公布的数据库流行度排行榜中，SQL Server几乎稳占第二名的位置。但从这个榜单每月的变化中也可以看出，大量NoSQL数据库的排名不断上升，已经开始威胁到传统数据库的地位。 　　“以不变应万变”不再是大数据时代应有的策略，老牌数据库厂商在保持传统市场领先的基础上，不断拓展新市场，微软就是其中的一个代表。微软的改变最早是为了向Bing提供高质量的搜索结果，这与Google的情况类似，互联网行业总是最早面临大数据挑战的。 　　微软端到端的大数据解决方案可以总结为SQL Server、Windows Azure和Hadoop，用微软自己的话说就是数据管理、数据扩充和洞察力。下面笔者将按照自下而上的顺序盘点微软大数据解决方案的具体内容： 　　一、数据管理 　　在微软的大数据解决方案中，数据管理是最底层和最基础的一环。灵活的数据管理层，可以支持所有数据类型，包括结构化、半结构化和非结构化的静态或动态数据。在数据管理层中主要包括三款产品：SQL Server、SQL Server并行数据仓库和Hadoop on Windows。 　　针对不同的数据类型，微软提供了不同的解决方案。具体来说，针对结构化数据可以使用SQL Server和SQL Server并行数据仓库处理;非结构化数据可以使用Windows Azure和Windows Server上基于Hadoop的发行版本处理;而流数据可以使用SQL Server StreamInsight管理，并提供接近实时的分析。 　　1、SQL Server。去年发布的SQL Server 2012针对大数据做了很多改进，其中最重要的就是全面支持Hadoop，这也是SQL Server 2012与SQL Server 2008最重要的区别之一。今年年底即将正式发布的SQL Server 2014中，SQL Server进一步针对大数据加入内存数据库功能，从硬件角度加速数据的处理，也被看为是针对大数据的改进。 　　2、SQL Server并行数据仓库。并行数据仓库(Parallel Data Warehouse Appliance，简称PDW)是在SQL Server 2008 R2中推出的新产品，目前已经成为微软主要的数据仓库产品，并将于今年发布基于SQL Server 2012的新款并行数据仓库一体机。SQL Server并行数据仓库采取的是大规模并行处理(MPP)架构，与传统的单机版SQL Server存在着根本上的不同，它将多种先进的数据存储与处理技术结合为一体，是微软大数据战略的重要组成部分。 　　3、Hadoop on Windows。微软同时在Windows Azure平台和Windows Server上提供Hadoop，把Hadoop的高性能、高可扩展与微软产品易用、易部署的传统优势融合到一起，形成完整的大数据解决方案。微软大数据解决方案还通过简单的部署以及与Active Directory和System Center等组件的集成，为Hadoop提供了Windows的易用性和可管理性。凭借Windows Azure上基于Hadoop的服务，微软为其大数据解决方案在云端提供了灵活性。 　　二、数据扩充 　　社交媒体的兴起给企业带来独特的计划，以获取更多商业价值，最终实现竞争优势。微软大数据解决方案将数据和模型与公用的数据和服务(包括Twitter、Facebook和LinkedIn等社交媒体网站)相结合，从而能够实现突破性的发现。在数据扩充层，微软提供的最重要的平台是Windows Azure Marketplace。 　　Windows Azure Marketplace是一个在线市场，用于购买和销售完成的软件即服务(SaaS)应用程序和高级数据集。Windows Azure Marketplace可以帮助将寻求基于云的创新解决方案的公司与开发了准备使用的解决方案的合作伙伴连接到一起，使客户能够使用Windows Azure Marketplace上的应用程序和挖掘算法来发现隐藏的模式。 　　·通过Windows Azure Marketplace进行共享和协作：微软大数据解决方案可让客户通过Windows Azure Marketplace共享数据并发现新的洞察力，Windows Azure Marketplace可通过开放数据协议(OData)展露数百种来自微软和第三方的应用程序和数据挖掘算法。 　　·与社交媒体集成：微软大数据解决方案可