- 1、本文档共7页,可阅读全部内容。
- 2、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
查看更多
Smartbi在Hadoop大数据分析中的应用大数据是目前最热门的话题,虽然不少厂商宣称推出了大数据的产品,但在实际应用中,Hadoop已经成为大数据处理的事实标准,Facebook、百度、阿里等互联网企业无一不采用Hadoop。即便是商业数据库公司,如IBM、Oracle、SAP、Teradata、甚至Microsoft等都采用了Hadoop。国产数据库厂商的人大金仓在大数据方解决案中也整合了Hadoop产品。Hadoop之所以这么受欢迎,源于其良好的系统架构,使其能够以很低的成本、高效率、可靠的存储和处理千兆字节(PB)数据。Hive 是构建在Hadoop 的数据仓库平台,用于存储和处理海量结构化数据。它把海量数据存储于 Hadoop 文件系统,而不是数据库,但提供了一套类数据库的数据存储和处理机制,并采用 HQL (类 SQL )语言对这些数据进行自动化管理和处理。我们可以把 Hive中海量结构化数据看成一个个的表,而实际上这些数据是分布式存储在 HDFS 中的。Hive 经过对语句进行解析和转换,最终生成一系列基于Hadoop的map/reduce 任务,通过执行这些任务完成数据处理。传统上商业智能BI平台或报表平台是基于关系数据库搭建的,即便数据仓库使用了Hadoop,也是将Hadoop作为计算工具,将计算结果写入Oracle、DB2等数据库中,供BI软件查询。事实上,随着Hadoop/Hive产业链的成熟,BI工具可以通过JDBC等方式,直接连接Hive查询数据。这样,除了专业的IT工程师,众多普通用户也能体验到Hadoop的魅力。Smartbi作为国内领先的BI平台,能够很好的支持Hadoop/Hive产品。Smartbi结合Hadoop/Hive在电信行业中已经取得了成功的应用案例。下面介绍如何使用Smartbi连接Hadoop/Hive查询数据。1.首先安装好系统环境,示例为Ubuntu 12.04/JDK7/Hadoop-1.2.1/Hive-0.11.0,并装载数据。然后启动Hive服务。2.将下列Hive JDBC驱动等文件拷贝到Smartbi的Lib目录下(.\smartbi\WEB-INF\lib)。3.启动Smartbi,在系统管理中建立Hadopp的JDBC连接,驱动程序类为:org.apache.hadoop.hive.jdbc.HiveDriver,连接串为jdbc:hive://ip:port/default。测试连接通过后保存。4.在Smartbi数据集定义功能中编写Hive SQL语句。5.点击“预览”按钮,查看查询结果。6.在Smartbi中展现Hive的报表。下面是“十个小故事大道理”不需要的朋友可以下载后编辑删除!!!谢谢!!!小故事1、《扁鹊的医术》 魏文王问名医扁鹊说:“你们家兄弟三人,都精于医术,到底哪一位最好呢? 扁鹊答:“长兄最好,中兄次之,我最差。 文王再问:“那么为什么你最出名呢? 扁鹊答:“长兄治病,是治病于病情发作之前。由于一般人不知道他事先能铲除病因,所以他的名气无法传出去;中兄治病,是治病于病情初起时。一般人以为他只 能治轻微的小病,所以他的名气只及本乡里。而我是治病于病情严重之时。一般人都看到我在经脉上穿针管放血、在皮肤上敷药等大手术,所以以为我的医术高明, 名气因此响遍全国。 大道理:事后控制不如事中控制,事中控制不如事前控制。 小故事2、危险的森林里 一个人在森林中漫游时,突然遇见了一只饥饿的老虎,老虎大吼一声就扑了上来。他立刻用最快的速度逃开,但是老虎紧追不舍,他一直跑一直跑,最后被老虎逼到了断崖边。 站在悬崖边上,他想:“与其被老虎捉到,活活被咬死,还不如跳入悬崖,说不定还有一线生机。” 他纵身跳入悬崖,非常幸运地卡在一棵树上。那是长在断崖边的梅树,树上结满了梅子。 正在庆幸之时,他听到断崖深处传来巨大的吼声,往崖底望去,原来有一只凶猛的狮子正抬头看着他,狮子的声音使他心颤,但转念一想:“狮子与老虎是相同的猛兽,被什么吃掉,都是一样的。” 刚一放下心,又听见了一阵声音,仔细一看,两只老鼠正用力地咬着梅树的树干。他先是一阵惊慌,立刻又放心了,他想:“被老鼠咬断树干跌死,总比被狮子咬死好。” 情绪平复下来后,他看到梅子长得正好,就采了一些吃起来。他觉得一辈子从没吃过那么好吃的梅子,他找到一个三角形的枝丫休息,心想:“既然迟早都要死,不如在死前好好睡上一觉吧!”于是靠在树上沉沉地睡去了。 睡醒之后,他发现黑白老鼠不见了,老虎和狮子也不见了。他顺着树枝,小心翼翼地攀上悬崖,终于脱离了险境。原来就在他睡着的时候,饥饿的老虎按捺不住,终于大吼一声,跳下了悬崖。 黑白老鼠听到老虎的吼声,惊慌地逃走了。跳下悬崖的老虎与崖下的狮子展开激烈的打斗,双双负伤逃走了。 励
您可能关注的文档
- proteus中的果器件(中英对照方便查询).doc
- pos机前台操作教成程.doc
- ps之vi一理念.doc
- ps到技巧.doc
- priceline电子i商务案例分析.doc
- ppt培训师李是宝运 介绍.docx
- pta焊工培训和项资质考试规程.doc
- ps翻译教程:ps创k建ios7风格倒数计时器.doc
- ptkmvn会计基础知识--三果大报表.doc
- ptt之二 果组织与教学能力训练(满分答案)--2013最新时代光华课程.docx
- 浙江省临海市白云高级中学2025届高三历史3月月考试题.doc
- 云南拾谷县第一中学2024_2025学年高二物理上学期10月月考试题.doc
- 2025版高考生物总复习第13讲基因的分离定律教案苏教版.doc
- 湖北省黄石实验高中2024_2025学年高一历史下学期期末考试模拟卷.doc
- 通史版2025版高考历史大一轮复习专题七近代化的曲折发展__中日甲午战争至五四运动前4第4讲从维新思想到新文化运动课后达标检测含解析新人教版.doc
- 2024年高考数学考试大纲解读专题04导数及其应用含解析文.doc
- 河南省许汝平九校联盟2024_2025学年高一语文上学期期末考试试题扫描版无答案.doc
- 江西省吉安市吉水县第二中学2024_2025学年高一历史上学期第二次月考试题.doc
- 北京市平谷区2025届高三政治一模考试试题含解析.doc
- 2025届中考物理第四讲物态变化专项复习测试无答案新人教版.docx
最近下载
- 武汉理工大学《高等数学》2022-2023学年第一学期期末试卷及答案.docx
- 《企业财务会计》全套PPT课件.pptx
- 社会体育建设方案-专业教学资源库备选项目材料.pdf VIP
- 美的品牌案例分析.pptx VIP
- 美的案例分析.pptx VIP
- 小学生秋季学期第1-20周国旗下讲话稿(新).pdf
- 边做边学——Dreamweaver CS6网页设计案例教程(第3版)(共12单元)01.ppt VIP
- 武汉理工大学2023-2024学年第1学期《高等数学(上)》期末考试试卷(A卷)附参考答案.pdf
- 清洁生产与循环经济( 第二版) 教学课件 作者 奚旦立徐淑红高春梅 主编 第4章 清洁生产.ppt
- 美的品牌案例分析.pptx VIP
文档评论(0)