云计算大数据处理数据立方与hive对比测试.docVIP

下载本文档

3
0
约 10页
2015-09-26 发布于重庆
举报
版权申诉

云计算大数据处理数据立方与hive对比测试.doc

1、本文档共10页，可阅读全部内容。
2、原创力文档（book118）网站文档一经付费（服务费），不意味着购买了该文档的版权，仅供个人/单位学习、研究之用，不得用于商业用途，未经授权，严禁复制、发行、汇编、翻译或者网络传播等，侵权必究。
3、本站所有内容均由合作方或网友上传，本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺！文档内容仅供研究参考，付费前请自行鉴别。如您付费，意味着您自己接受本站规则且自行承担风险，本站不退款、不进行额外附加服务；查看《如何避免下载的几个坑》。如果您已付费下载过本站文档，您可以点击这里二次下载。
4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等，请点击“版权申诉”（推荐），也可以打举报电话：400-050-0827(电话支持时间：9:00-18:30)。
5、该文档为VIP文档，如果想要下载，成为VIP会员后，下载免费。
6、成为VIP后，下载本文档将扣除1次下载权益。下载后，不支持退款、换文档。如有疑问请联系我们。
7、成为VIP后，您将拥有八大权益，权益包括：VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
8、VIP文档为合作方或网友上传，每下载1次，网站将根据用户上传文档的质量评分、类型等，对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档

云计算大数据处理数据立方与hive对比测试

云计算大数据处理分布式数据库 -数据立方与Hive对比测试报告一、目的最近进行了云创存储的数据立方性能测试，并将其与开源数据仓库数据量(条) 查询时间(ms) hive 800W 115114 1000W 38887 数据立方 800W 23340 1000W 6910 通过相同环境下测试可以看出：数据立方单表统计查询速度是Hive的至少3-5倍。单表字段查询性能对比测试产品名称数据量(条) 查询时间(ms) hive 800W 17659 1000W 18883 数据立方 800W 370 1000W 1360 从数据图可以看到单表字段查询时数据立方速度是hive的5-10倍。两表join查询性能对比测试结果集 A表 B表数据立方查询时间(ms) 10W 1000W 800W 41667 3950 50W 1000W 800W 48296 6880 从数据图可以看到两表join查询时数据立方速度是hive的6-10倍以上。三表join查询性能对比测试结果集 A表 B表数据立方查询时间(ms) 1000条 1000W 00W 800W 65550 7170 7000条 1000W 800W 800W 67891 7710 从数据图可以看到三表join查询时数据立方速度是hive速度的几乎10倍。 GangLia监控截图： 1个小时内CPU负载情况图 1个小时内内存使用情况图 1个小时内CPU负载情况图 1个小时内网络负载情况图 1个小时内数据包流量图五.测试总结本次在一体机上分别对云创存储的数据立方、开源数据仓库Hive在不同数据量情况下，进行了单表数据量查询性能对比测试，单表字段查询性能对比测试，两表join查询性能对比测试,三表join查询性能对比测试,从测试结果来看，数据立方在数据查询方面都优越于开源数据仓库Hive，数据立方的查询速度一般是Hive的3-10倍。证明了其优异的性能。具体性能结果请见第四章节测试结果部分。