原创力文档- 1、原创力文档（book118）网站文档一经付费（服务费），不意味着购买了该文档的版权，仅供个人/单位学习、研究之用，不得用于商业用途，未经授权，严禁复制、发行、汇编、翻译或者网络传播等，侵权必究。。
- 2、本站所有内容均由合作方或网友上传，本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺！文档内容仅供研究参考，付费前请自行鉴别。如您付费，意味着您自己接受本站规则且自行承担风险，本站不退款、不进行额外附加服务；查看《如何避免下载的几个坑》。如果您已付费下载过本站文档，您可以点击 这里二次下载。
- 3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等，请点击“版权申诉”（推荐），也可以打举报电话：400-050-0827(电话支持时间：9:00-18:30)。
- 4、该文档为VIP文档，如果想要下载，成为VIP会员后，下载免费。
- 5、成为VIP后，下载本文档将扣除1次下载权益。下载后，不支持退款、换文档。如有疑问请联系我们。
- 6、成为VIP后，您将拥有八大权益，权益包括：VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 7、VIP文档为合作方或网友上传，每下载1次， 网站将根据用户上传文档的质量评分、类型等，对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
查看更多
微博舆情的Hadoop存储和管理平台设计与实现
计算机技术与应用 Computer Technology and Its Applications
微博舆情的Hadoop 存储和管理平台设计与实现*
余 辉 1 ，黄永峰2 ，胡 萍3
( 1. 中国科学院大学，北京 100043 ；2 . 清华大学 电子工程系，北京 100084 ；
3 . 清华大学 网络科学与网络空间研究院，北京 100084)
摘 要： 随着Internet 技术的迅速发展， 网络舆情监控系统正在得到广泛应用。 网络舆情监控系统的数据量也急速膨
胀， 如何高效地存储和管理这些海量的非结构或半结构化数据成为网络舆情系统研发中的挑战课题。 传统的关系
数据库和分布式计算等数据处理的方式也越来越不能适应日益增长网络大数据。 针对微博数据的特点建立了一种
面向微博舆情应用的 Hadoop 存储平台的多层体系架构，并采用列数据库设计多种微博结构化数据的表结构， 以及
表之间的关系模型。 测试结果表明，设计的存储管理平台具有检索响应速度快、 可扩展性好等特点。
关键词： 舆情分析；Hadoop ；Hbase ；云存储；云计算
中图分类号： TP399 文献标识码： A DOI ：10.16157/j.issn.0258-7998.2017.03.030
文引用格式： 余辉，黄永峰，胡萍 博舆情的 子技术应用，
中 微 存储和管理平台设计与实现 电 ， ： ，
. Hadoop [J]. 2017 43(3) 120-123 131.
英文引用格式 ： Yu Hui ，Huang Yongfeng ，Hu Ping. Design and implementation of Hadoop based storage and management platform
on the Weibo public opinion[J].Application of Electronic Technique ，2017 ，43 (3) ：余辉，黄永峰，胡萍. 微博舆情的 Hadoop 存储和
管理平台设计与实现[J]. 电子技术应用，2017 ，43 (3) ：120-123 ，131.
Design and implementation of Hadoop based storage and management platform
on the Weibo public opinion
1 2 3
Yu Hui ，Huang Yongfeng ，Hu Ping
( 1.University of Chinese Academy of Sciences ，Beijing 100043 ，China ；
2 .Department of Electronic Engineer ，Tsinghua University ，Beijing 100084 ，China ；
， ， ，
文档评论（0）