云计算二章2-5Hadoop：Google云计算的开源实现.pptVIP

Hadoop：Google云计算的开源实现 ;提 纲;Hadoop简介 ;Hadoop简介;Hadoop简介;提 纲;设计前提与目标 ;体系结构 ;保障可靠性的措施 ;保障可靠性的措施 ;保障可靠性的措施 ;提升性能的措施 ;访问接口 ;提 纲;逻辑模型;实现机制 ;提 纲;逻辑模型 ;物理模型 ;子表服务器 ;主服务器 ;元数据表 ;提 纲;在Linux系统中安装Hadoop ;2．安装步骤 1）单机模式 默认情况下，Hadoop被配置成一个以非分布式模式运行的独立Java进程，适合开始时做调试工作 WordCount实例 $ mkdir input $ cd input $ echo hello world test1.txt $ echo hello hadoop test2.txt $ bin/hadoop jar hadoop-mapred-examples-0.20.2.jar wordcount input output 查看执行结果 $ cat output/*;2．安装步骤 2）伪分布式模式 用不同的Java进程模拟分布式运行中各类节点 （1）Hadoop配置 ;（2）免密码SSH设置 ?生成密钥对 $ ssh-keygen -t rsa ?一直按【Enter】键，按照默认的选项将生成的密钥对保存在.ssh/id_rsa文件中 ?进入.ssh目录 $ cp id_rsa.pub authorized_keys ?执行$ ssh localhost，可以实现用SSH 连接并且不需要输入密码 ;在Linux系统中安装Hadoop ;3）完全分布式模式 （1）配置NameNode和DataNode （2）在所有的机器上建立相同的用户grid $ useradd -m grid $ passwd grid （3）SSH配置 在所有机器上建立.ssh目录 $ mkdir .ssh 在ubuntunamenode上生成密钥对 $ ssh-keygen -t rsa ;在Linux系统中安装Hadoop ;在Linux系统中安装Hadoop ;在Linux系统中安装Hadoop ;在Linux系统中安装Hadoop ;在Linux系统中安装Hadoop ;在Linux系统中安装Hadoop ;在Linux系统中安装Hadoop ;在Windows系统中安装Hadoop ;在Windows系统中安装Hadoop ;在Windows系统中安装Hadoop ;在Windows系统中安装Hadoop ;在Windows系统中安装Hadoop ;在Windows系统中安装Hadoop ;在Windows系统中安装Hadoop ;在Windows系统中安装Hadoop ;提 纲; HDFS 常用命令 ; HDFS 常用命令 ;HDFS 基准测试 ;提 纲;HBase的安装配置 ;HBase的执行 ;Hbase编程实例;提 纲;矩阵相乘算法设计;编程实现 ;编程实现 ;编程实现 ;1．分析比较Hadoop的优缺点。 2．Hadoop里有哪些机制？解决了哪些问题？ 3．HDFS有哪些保障可靠性的措施？ 4．MapReduce 模型适合（不适合）哪些环境？ 5．阐述Hbase与Bigtable相同点与不同点？