基于大数据下的NOSQL和Mysql融合的数据存储模型研究.pdfVIP

应用研究 I兰I兰与兰应用 基于大数据下的NOSQL 和Mysql融合的数据存储模型研究 万川梅 (重庆正大软件职业技术学院 重庆 400056) 摘要：大数据作为一种重要的战略资产，已经不同程度地渗透到每个行业领域和部门，其深度应用不仅有助于企业经营活动，还有利于推动国民 经济发展。而传统的 系数据库管理系统在大数据环境 中已不堪重负，Nosql和关系数据库融合将是大数据发展的下一个趋势。 关键J~：NOSQL 融合 存储模型 Mysql 中图分类号：TP31 文献标识码：A 文章编号：1007-9416(2014)02．0096—01 1引言 750000+次查询 。 随着互联网的不断发展，各种类型的应用层出不穷，尤其在云计 更小的网络数据包：HandlerSocket协议和传统MySQL协议相 算时代，对数据存储提出了更新、更多的要求。关系数据库长期以来在 比更简单，更小 ，因此整个网络的流量也更小。 数据存储方面 占据了不可动摇的地位，但关系数据库有其扩展困难、 没有重复的缓存：采用HandlerSocket插件访 问InnoDB存储引 读写慢、成本高、有限的支撑容量等天生的限制，在解决新的海量数据 擎，记录可以缓存在InnoDB缓冲池中，这样其它sQL语句就可以重 存储需求时，显得力不 ，于是推出了新类型的“N ”数据类型， 复使用它。 NOeL可以弥补关系数据库在数据高并发地读写和海量数据存储的 保证数据一致：由于数据只存储在一个地方(InnoDB内)，不需 要求。 要在Memcached和MySQL之间检查数据一致性。 崩溃安全：后端存储是InnoDB，它是事务性和崩溃安全的，即 2NOSQL与关系数据库融合的研究现状 使你设置innodb-flush—bg—at-trx-commit!=1，在服务器崩溃时 在大数据迅猛发展的今天，从关系数据库到N0SQL数据库，有 也只会丢掉1秒内的数据。 一 个必不可少的环节，那就是数据的过度和迁移f1]。在数据迁移过 可以从MySQL客户端使用SQL：在许多情况下，人们仍然希望 程，需要对历史数据清洗、转换、并装载到新系统，在这过程中面临 使用SQL，HandlerSocket仅仅是一个MySQL插件，你可以从 着人工、数据安全、运维等潜在的危险，在数据迁移后还面临着操作 MySQL客户端发送sQL语句，当你需要高吞吐量时最好使用 方式的转换等难题。NOSQL和关系数据库能融合的存储数据，企业 HandlerSocket协议。 和数据管理者就可以免去这一风险。 MySQL所有操作都将受益：HandlerSocket在MySQL内部运 目前关于NOSQL与关系数据融合的研究已经有了一些成功， 行，因此所有MySQL操作，?~ISQL、在线备份、复制、通过Nagios／ 2011年Mysql关系数据库5．6．2版本推出了memcached功能，他可 EnterpriseMonitor监控都是支持的，HandlerSocket可以使用普通 以使得开发人员更加方便使用NOSQL和关系数据库，可以直接在 的MySQL命令监控，如SH0W GLOBALSTAUTS，SHOW EN— InnoDB之上提供NOSQL功能和Mysql共存。随后的第二年，Mysql GINEINNODBSTATUS和SHOW PROCESSLIST等。 又推出了HandlerSocket的出现，性能是Memcached的两倍时，速率 不需要修改／重建MySQL：因为HandlerSocket是一个插件，它 居然可以达