实验2-熟悉常用的HDFS操作-题目.docxVIP

实验2 实验2熟悉常用的HDFS操作 实验2熟悉常用的HDFS操作 《云计算》课程机房上机实验报告 题目 熟悉常用的 HDFS操作 姓名 日期 实验环境： 实验内容与完成情况： 出现的问题： 解决方案（列出遇到的问题和解决办法，列出没有解决的问题）： 1实验目的 理解HDFS在Hadoop体系结构中的角色； 熟练使用HDFS操作常用的Shell命令； 熟悉HDFS操作常用的Java API。 2实验平台 操作系统：Lin ux Hadoop版本：2.6.0或以上版本 JDK版本：1.6或以上版本 Java IDE: Eclipse 3实验内容和要求 1.编程实现以下指定功能，并利用 Hadoop提供的Shell命令完成相同任务： （1） 向HDFS中上传任意文本文件，如果指定的文件在 HDFS中已经存在，由用户 指定是追加到原有文件末尾还是覆盖原有的文件； 开启服务： wttnffubuntu:/usr/loc^l/h^doop/sbln$ ./startyll:sh This script is DeprecatedInstead use start-dfs-sh and start-yarn.sh Starting namenodes on [localhost] locaLhost: starting nahenodet logging to /usr/local/hadoop/log^/hadoop-wen-nam nod?-ubuntu.out Shell命令: f/hadoop fs -test echo $?-e text.txtwen^ubuntu: /usr/local/hadoop/bi.n$ hadoop ; f/hadoop fs -test echo $? -e text.txt wen^ubuntu: /usr/local/hadoop/bi.n$ hadoop ;未栈到命令 wen^ubuntu:/usr/local/hadoop/btn$ wen^ubuntu:/usr/local/hadoop/bln$ wenQubuntu:/usr/local/hadoop/btn^ Hi., girls Hifgtrls wrnfiulbuntu: /usr/lo cal/hadoop/bin $ txt wen^ubuntu:/usr/local/hadoop/bin^ Hi., girls wen@ubufttu:/usr/local/had44p/btn$ hadoop fs -appendToFile local * txt text *txt ./hadoop fs -appendToFtle local?txt texttxt ./hadoop fs -appendToFtle local * txt text.txt ./hadoop fs -cat text ?txt ./hadoop fs -copyFronLo匚al 亠f local?txt text. ./hadoop fs -cat text?txt ^ubuntu:/usr/lDcal/hadoop/bin^ wen(3 ubuntu:/usr/local/hadoop/btn$ Q 口 Console 黒 X -x cterminated HdfsApi [java Appticadon]/usr/lib/Jvm/java-7-open； tag4^:WARN No app年“dws couId b? found fcr logger (org.. tog4]:WAfthi Please inKuhze the Iog4| 5ystem property. tag4jiWARW hi(pi//1Ao1.2/faq.Kcm^noconfig fa /user/tiny^teKl.tJtt 不存在. /usr/lo^1/hadoop/textAx(已上祷至 /userAlnyftexc.txt 从HDFS中下载指定文件，如果本地文件与要下载的文件名称相同，则自动对 下载的文件重命名； Shell命令: wen@ubuntu:/usr/lacol/hadoap/btn$ export PATH=$PATH:/usr/Locat/hadoop/bin wen@ubuntu:/usr/locaL/hddoop/bin$ if S(hadoop f$ -test *e /u^r/local/hadoop/tex t.txt)； a then $(hadoop fs -copyToLo匚al text?txt ./text?txt); a else ${hadoop fs -copyToLccal text * txt */text2.tx