大数据落地 从小做起.docxVIP

大数据落地 从小做起2014-09-01 14:39 佚名 51cto 字号：javascript:setfont(12);T | javascript:setfont(16);T大数据无疑已经成为业界最热点的话题之一，无论是传统的企业，还是新兴的互联网企业，都在盯紧大数据这个巨大的市场。凭借着连续14年被Gartner评为数据仓库领导者象限的Teradata，一直专注于数据仓库和数据分析领域的创新，近日，Teradata天睿公司大中华区大数据事业部总监孔宇华向记者展现了Teradata的大数据技术实力以及在大数据分析方面的创新。AD： /course/course_id-1189.html2014WOT全球软件技术峰会北京站 课程视频发布 /2014shenzhen/11月21日-22日 与WOT技术大会相约深圳 现在抢票 大数据无疑已经成为业界最热点的话题之一，无论是传统的企业，还是新兴的互联网企业，都在盯紧大数据这个巨大的市场。凭借着连续14年被Gartner评为数据仓库领导者象限的Teradata，一直专注于数据仓库和数据分析领域的创新，近日，Teradata天睿公司大中华区大数据事业部总监孔宇华向记者展现了Teradata的大数据技术实力以及在大数据分析方面的创新。?Teradata天睿公司大中华区大数据事业部总监孔宇华目前，很多企业都在进行大数据的工作，有些简单有些复杂。而孔宇华表示，大数据要从小做起，从一个应用、一个业务需求开始，通过不同的数据源、不同的数据分析工具，实现大数据的应用，最终帮助企业获得数据的价值。很多企业收集非结构化数据，而后保存到一个平台中，就认为将大数据做好了，其实不然。孔宇华认为，真正挖掘大数据的价值是要通过数据分析才能实现。Teradata想传递给客户的理念是，大数据可以从小做起，不一定是需要100个PC服务器或者等到积累1PB的数据才会做好。在大数据分析时，孔宇华建议企业，可以从业务部门的需求开始，制定目标和方向，而不一开始就去搭建平台。当有了目标后，企业就知道需要的数据类型，而后加载少量数据，分析师可以做数据轮廓的分析，判断数据是否适合，若不适合，可以加载企业数据进行调整，若适合，加载更多数据进行分析。孔宇华强调，数据的价值不在于存储，而是在于分析，如果数据放进一个平台，通过分析才可以将数据的价值释放出来。Aster：大数据分析的“瑞士军刀”Teradata Aster大数据探索平台，可以汇集不同的数据源，包括结构化数据和非结构化数据，然后通过不同的分析方法，例如SQL分析、MapReduce、关联分析、路径分析、文本分析结合在一起，让数据的价值变得更加容易把控。孔宇华将Aster形象的比喻为大数据分析的“瑞士军刀”，因为在Aster中，预置了很多分析算法，例如SQL、MapReduce、时间序列、地理空间、文字文本等。用户使用相关分析算法工具时，不用挪动数据，而是可以在数据的原始位置进行访问，调取不同的方法和角度来分析数据。?Teradata大数据解决方案——统一数据架构大数据时代，速度代表一切，而Aster在分析层面通过四个步骤可以让用户快速从数据中获得价值，即：数据获取、数据准备、数据分析、数据展现。在数据获取方面，Aster可以直接连接Hadoop、Teradata以及其他不同的数据仓库，甚至是通过APIs连接微博。只要有APIs的平台，Aster都可以直接连接从而进行分析，因此也就减少了数据加载的麻烦；其次，在数据准备方面，Aster提供接口和工具，可以将非结构化数据转化为结构化，将结构化数据转变成可分析的模型；第三，在数据分析方面，Aster提供了不同的分析方面给用户使用；第四，在数据展现方面，Aster提供了可视化模块，并且可以连接其他BI工具，此外Aster提供了一百多种函数，用于路径分析、图分析、数据转换、统计分析等模块。Aster创新研发成果去年，Teradata在发布最新的Aster大数据探索平台时，也发布了Aster一些创新的研发成功，例如SNAP Framework、SQL Graph分析引擎和Aster文件存储。?SMAP FrameworkSNAP Framework是介于存储系统和分析系统之间的框架，有统一的SQL接口进行访问，支持多重分析引擎和文件存储。此外，在过去的数据库行存储基础上，增加了列存储以及文件存储。在分析层面，除了SQL和MapReduce，还增加了图形分析引擎SQL-Graph，通过图形分析引擎可以快速做出网络数据图形分析。SQL-Graph图形引擎支持本机处理大规模分析图表查询以及预建图形功能，并可用于客户流失、产品关联性、欺诈侦测以及推荐引擎分析等。Aster文件存储可以提供不同存储选项，用户可以通过文件存储保存全部数据，Aster