原创力文档- 1、原创力文档（book118）网站文档一经付费（服务费），不意味着购买了该文档的版权，仅供个人/单位学习、研究之用，不得用于商业用途，未经授权，严禁复制、发行、汇编、翻译或者网络传播等，侵权必究。。
- 2、本站所有内容均由合作方或网友上传，本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺！文档内容仅供研究参考，付费前请自行鉴别。如您付费，意味着您自己接受本站规则且自行承担风险，本站不退款、不进行额外附加服务；查看《如何避免下载的几个坑》。如果您已付费下载过本站文档，您可以点击 这里二次下载。
- 3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等，请点击“版权申诉”（推荐），也可以打举报电话：400-050-0827(电话支持时间：9:00-18:30)。
- 4、该文档为VIP文档，如果想要下载，成为VIP会员后，下载免费。
- 5、成为VIP后，下载本文档将扣除1次下载权益。下载后，不支持退款、换文档。如有疑问请联系我们。
- 6、成为VIP后，您将拥有八大权益，权益包括：VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 7、VIP文档为合作方或网友上传，每下载1次， 网站将根据用户上传文档的质量评分、类型等，对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
查看更多
中文 登录 (或注册)
技技技技术术术术主主主主题题题题 软软软软件下件下件下件下载载载载 社社社社区区区区 技技技技术讲术讲术讲术讲座座座座 搜索 developerWorks
developerWorks 技术主题 Java technology 文档库
MapReduce 编程模型在日志分析方面的应用
马 丽丽, 软件工程师, IBM 发发发发布日期：布日期：布日期：布日期： 2011 年 5 月 05 日
级别级别级别级别：：：： 高级
简简简简介：介：介：介： 日志分析往往是商业智能的基础，而日益增长的日志信息条 目使得大规模数据处理平台
的出现成为必然。MapReduce 处理数据的有效性为日志分析提供了可靠的后盾。本文将以对 访问访问访问访问情情情情况况况况 6692 次浏览
访问网页用户的日志进行分析，进而挖掘出用户兴趣点这一完整流程为例，详尽解释 建建建建议议议议：：：：
MapReduce 模型的对应实现，涵盖 MapReduce 编程中对于特殊问题的处理技巧，比如机器
学习算法、排序算法、索引机制、连接机制等。
标记标记标记标记本文！本文！本文！本文！
简简简简介介介介 内内内内容容容容
简介
日志分析往往是商业智能的基础，而日益增长的日志信息条 目使得大规模数据处理平台的出现成为必然。MapReduce 处理数据的有
效性为日志分析提供了可靠的后盾。 MapReduce 编程模型简介
日志分析应用
本文将以对访问网页用户的日志进行分析，进而挖掘出用户兴趣点这一完整流程为例，详细解释 MapReduce 模型的对应实现，涵盖 用户访问网页行为建模
在 MapReduce 编程中对于特殊问题的处理技巧，比如机器学习算法、排序算法、索引机制、连接机制等。文章分三部分展开：首先
MapReduce 对用户兴趣挖掘的
介绍 MapReduce 编程模型，对其原理、对任务处理流程以及适用情况进行介绍；接下来描述了日志分析的例子 - 用户兴趣点挖掘的
实现
处理流程；最后对处理流程的几个模块分别进行了 MapReduce 的实现。本文的目的在于通过 MapReduce 在日志分析领域
文档评论（0）