- 63
- 0
- 约1.3万字
- 约 44页
- 2019-06-17 发布于天津
- 举报
下面是一个采用语言编写的应用程序实例实现对用户访问网页情况的统计分析得到的表的结构得到的连接结果表的结构得到的表的结构得到的连接结果表的结构图从脚本转化得到的作业是通过编译为在集群上执行的统计用户访问量程序被编译成时会产生如图所示的和的应用场景数据查询只面向相关技术人员即时性的数据处理需求这样可以通过很快写一个脚本开始运行处理而不需要创建表等相关的事先准备工作主要用户以上的作业是生成的以上的作业是生成的大部分的作业是生成的其他主要用户是开源的支持作业的计算框架它直接源于框架核心思想是将和两个操作
8.4.1Pig 下面是一个采用Pig Latin语言编写的应用程序实例,实现对用户访问网页情况的统计分析: visits = load ‘/data/visits’ as (user, url, time); gVisits = group visits by url; visitCounts = foreach gVisits generate url, count(visits); //得到的表的结构visitCounts(url,visits) urlInfo = load ‘/data/urlInfo’ as (url, category, pRank); visitCounts = join visitCounts by url, urlInfo by url; //得到的连接结果表的结构visitCounts(url,visits,category,pRank) gCategories = group visitCounts by category; topUrls = foreach gCategories generate top(visitCounts,10); store topUrls into ‘/data/topUrls’; 1 visits = load ‘
您可能关注的文档
最近下载
- 《肯德基CIS分析》课件.ppt VIP
- 监理规划62157军专线.doc VIP
- 诗歌鉴赏寄江州白司马课件2024届高考语文复习.pptx VIP
- OBS直播使用教程..docx VIP
- 近现代史大事年表(英美法德俄日国别大事年表) .pdf VIP
- (2026年)如何为新护士进行临床带教PPT课件.pptx VIP
- 华南理工大学期末考试《 电力系统分析》试卷1B.doc VIP
- 2022年人教版高考历史专题复习:经济史 核心知识点考点提纲(实用!).docx VIP
- 人教版高考历史一轮复习:必修二 经济史 知识点考点提纲(全面,详细!).doc VIP
- 人教版高考历史一轮复习:必修一 政治史 知识点考点提纲(全面,详细!).doc VIP
原创力文档

文档评论(0)