自学笔记_大数据研讨.docx

北京首钢自动化信息技术有限公司信息事业部 BEIJING SHOUGANG AUTOMATION INFORMATION TECHNOLOGY CO.,LTD INFORMATION DEPARTMENT 北京首钢自动化信息技术有限公司信息事业部 Email: hdc@ 北京·石景山厂东门内 邮编：100041 TEL: 010 FAX: 010大数据 知识点介绍 阅读笔记  HYPERLINK /view/17863.htm \t _blank CIO与 CTO 首席信息官（是Chief Information Officer的缩写）中文意思是首席信息官或信息主管，是负责一个公司信息技术和系统所有领域的高级官员。他们通过指导对信息技术的利用来支持公司的目标。他们具备技术和业务过程两方面的知识，具有多功能的概念，常常是将组织的技术调配战略与业务战略紧密结合在一起的最佳人选。 首席技术官（英??Chief Technology Officer的缩写），即企业内负责技术的最高负责人。有时CTO和CIO（Chief Information Officer信息管理最高负责人）是同一个人（尤其在软件公司），有时CTO归于比较精通科学技术的CIO手下。在国内CTO通常是由软件工程师（程序员）一步步成长起来的，而CIO通常是由IT工程师（网管）成长起来的，一个倾向于程序开发、一个倾向于IT管理。 公有云 通常指第三方提供商为用户提供的能够使用的云，公有云一般可通过 Internet 使用，可能是免费或成本低廉的，公有云的核心属性是共享资源服务。这种云有许多实例，可在当今整个开放的公有网络中提供服务。 IBM数据分析家族 IBM 的数据分析平台家族（SPSS、Cognos、Smart Analytics Systems、Netezza、文本注释器、语音到文本转换等各种开源产品（Eclipse、非结构化信息管理架构 (UIMA)、Apache Derby、Lucene、XQuery、SQL 和 Xerces XML 处理器）中使用的集成开发环境 (IDE) M2M machine-to-machine, M2M不要将速度的概念限定为与您的数据存储库相关的增长速率，我们建议动态地将此定义应用到数据：数据流动的速度。 NoSQL ?NoSQL，泛指非关系型的数据库。 NoSQL数据库的四大分类 键值( HYPERLINK /view/6728383.htm \t _blank Key-Value)存储 HYPERLINK /view/1088.htm \t _blank 数据库 这一类数据库主要会使用到一个 HYPERLINK /view/329976.htm \t _blank 哈希表，这个表中有一个特定的键和一个指针指向特定的数据。Key/value模型对于IT系统来说的优势在于简单、易部署。但是如果 HYPERLINK /subview/67156/5112091.htm \t _blank DBA只对部分值进行查询或更新的时候，Key/value就显得效率低下了。 列存储数据库。 这部分数据库通常是用来应对分布式存储的海量数据。键仍然存在，但是它们的特点是指向了多个列。这些列是由列家族来安排的。 文档型数据库 文档型数据库的灵感是来自于Lotus Notes办公软件的，而且它同第一种键值存储相类似。该类型的数据模型是版本化的文档，半结构化的文档以特定的格式存储，比如JSON。文档型数据库可以看作是键值数据库的升级版，允许之间嵌套键值。而且文档型数据库比键值数据库的查询效率更高。 图形(Graph)数据库 图形结构的数据库同其他行列以及刚性结构的SQL数据库不同，它是使用灵活的图形模型，并且能够扩展到多个服务器上。NoSQL数据库没有标准的查询语言(SQL)，因此进行数据库查询需要制定数据模型。许多NoSQL数据库都有REST式的数据接口或者查询API。 NoSQL数据库的四大分类表格 分类Examples举例典型应用场景数据模型优点缺点键值（key-value）Tokyo Cabinet/Tyrant, Redis, Voldemort, Oracle BDB内容缓存，主要用于处理大量数据的高访问负载，也用于一些日志系统等等。[3]Key 指向 Va