零基础学习hadoop(编程篇).doc

word word PAGE / NUMPAGES word 1.hadoop编程需要哪些根底？2.hadoop编程需要注意哪些问题？3.如何创建mapreduce程序与其包含几局部？4.如何远程连接eclipse，可能会遇到什么问题？5.如何编译hadoop源码？?阅读此篇文章，需要些根底下面两篇文章 零根底学习hadoop到上手工作线路指导〔初级篇〕 零根底学习hadoop到上手工作线路指导〔中级篇〕如果看过的话，看这篇不成问题，此篇讲hadoop编程篇。hadoop 编程，hadoop是一个Java框架，同时也是编程的一次革命，使得传统开发运行程序由单台客户端〔单台电脑〕转换为可以由多个客户端运行〔多台机器〕运行，使得任务得以分解，这大大提高了效率。hadoop既然是一个Java框架，因为我们必须要懂Java，网上有大量的资料，所以学习Java不是件难事。但是学到什么程度，可能是我们零根底同学所关心的。语言很多情况下都是相通的，如果你是学生，还处于打根底的阶段，那么难度对于你来说还是不小的。1.初学者要求必须有理论根底，并且能够完成一个小项目，最起码能够完成几个小例子，例如图书馆里等。初学者根本的要求：〔1〕懂什么是对象、接口、继续、多态〔2〕必须熟悉Java语法〔3〕掌握一定的常用包〔4〕会使用maven下载代码〔5〕会使用eclipse，包括里面的快捷键，如何打开项目传统程序员，因为具有丰富的编程经验，因此只要能够掌握开发工具：〔1〕会使用maven下载代码〔2〕会使用eclipse，包括里面的快捷键，如何打开项目〔3〕简单熟悉Java语法上面的只是根底，如果想开发hadoop，还需要懂得下面内容〔1〕会编译hadoop〔2〕会使用hadoop-eclipse-plugin插件，远程连接集群〔3〕会运行hadoop程序。上面列出大概的内容，下面我们具体说一些需要学习的内容。无论是传统开发人员还是学生，零根底下面都是需要掌握的：我们就需要进入开发了。开发零根底，该如何，咱们提供了相关的内容分别介绍下面文章 学习hadoopjava零根底学习线路指导视频(1)这一篇我们使用什么开发工具，甚至考虑使用什么操作系统。然后就是Java根底知识篇，包括变量、函数等。 学习hadoopJava初级快读入门指导〔2〕第一篇是属于思想篇，那么这一篇属于实战篇，通过不同的方式，交给你怎么编写第一个小程序。 Java零根底：一步步教你如何使用eclipse创建项目与编写小程序实例由于上面没有真正抽象出eclipse的使用，所以这里专门介绍了使用eclipse如何创建项目，与如何编写小程序实例 java根底：eclipse编程不得不知道的技巧eclipse根本知识会了之后，我们在项目，这些技巧相当有用，而且经常用到一、考虑开发环境上面是我们打根底，有了这些根底，我们就开始学习开发hadoop了，但是我们该怎么搭建环境，我们知道Windows有32、64位之分，jdk也有，那么该如何解决，我们在window32位上需要使用32位jdk，64位如此使用64位jdk，同样如果Linux如此使用Linux32位于64位。更详细，可以参考 零根底利用Java开发hadoop需要考虑的问题二、使用J2SE、J2EE使用Java我们需要整体了解Java语言，Java包含下面三种 J2EE java企业版，主要用于web开发 J2SE java 标准版，主要用于WEB开发，但是缺少企业版的一些特性，一般情况下java下的应用都是指J2SE的开发。 J2ME? java?微小版，主要用于手机等的开发 因此如果我们想处理、并展示数据，可以使用J2EE，更详细参考 hadoop开发--Java零根底之J2EE、J2SE、J2ME的区别三、对Java有了一定的认识，我们开始使用Java对于惯用集成环境的开发者来讲，这有点不适应，比如.net，安装开发环境vs，直接开发就好了，为啥还需要配置环境变量。环境变量可以让我们找到jdk的命令，这个或许.net的一点好处，就是都封装起来了。别的不用关心了。对于环境变量，我们需要配置java_home,path路径，更详细参考： hadoop开发--Java零根底之开发工具环境变量配置 开发工具 hadoop开发—Java零根底,开发选择什么开发工具比拟适宜而其中maven可以和eclipse一起使用，也可以单独使用，后面开发中它还是比拟常用的，比如我们下载hadoop 源码，编译hadoop，都是需要maven来完成的。maven的学习可以参考 源码编译maven系列视频教程汇总Java可以一处编译处处运行，原因是因为jvm。编译后的效果，可以查看： Java零