实验2-熟悉常用的HDFS操作-题目.docxVIP

  • 327
  • 0
  • 约9.32千字
  • 约 7页
  • 2021-10-18 发布于天津
  • 举报
实验2 实验2熟悉常用的HDFS操作 实验2熟悉常用的HDFS操作 《云计算》课程机房上机实验报告 题目 熟悉常用的 HDFS操作 姓名 日期 实验环境: 实验内容与完成情况: 出现的问题: 解决方案(列出遇到的问题和解决办法,列出没有解决的问题): 1实验目的 理解HDFS在Hadoop体系结构中的角色; 熟练使用HDFS操作常用的Shell命令; 熟悉HDFS操作常用的Java API。 2实验平台 操作系统:Lin ux Hadoop版本:2.6.0或以上版本 JDK版本:1.6或以上版本 Java IDE: Eclipse 3实验内容和要求 1.编程实现以下指定功能,并利用 Hadoop提供的Shell命令完成相同任务: (1) 向HDFS中上传任意文本文件,如果指定的文件在 HDFS中已经存在,由用户 指定是追加到原有文件末尾还是覆盖原有的文件; 开启服务: wttnffubuntu:/usr/loc^l/h^doop/sbln$ ./startyll:sh This script is DeprecatedInstead use start-dfs-sh and start-yarn.sh Starting namenodes on [localhost] locaLhost: starting nahenodet logging to /usr/local/hadoop/log^/hadoop-wen-nam nod?-ubuntu.out Shell命令: f/hadoop fs -test echo $?-e text.txtwen^ubuntu: /usr/local/hadoop/bi.n$ hadoop ; f/hadoop fs -test echo $? -e text.txt wen^ubuntu: /usr/local/hadoop/bi.n$ hadoop ;未栈到命令 wen^ubuntu:/usr/local/hadoop/btn$ wen^ubuntu:/usr/local/hadoop/bln$ wenQubuntu:/usr/local/hadoop/btn^ Hi., girls Hifgtrls wrnfiulbuntu: /usr/lo cal/hadoop/bin $ txt wen^ubuntu:/usr/local/hadoop/bin^ Hi., girls wen@ubufttu:/usr/local/had44p/btn$ hadoop fs -appendToFile local * txt text *txt ./hadoop fs -appendToFtle local?txt texttxt ./hadoop fs -appendToFtle local * txt text.txt ./hadoop fs -cat text ?txt ./hadoop fs -copyFronLo匚al 亠f local?txt text. ./hadoop fs -cat text?txt ^ubuntu:/usr/lDcal/hadoop/bin^ wen(3 ubuntu:/usr/local/hadoop/btn$ Q 口 Console 黒 X -x cterminated HdfsApi [java Appticadon]/usr/lib/Jvm/java-7-open; tag4^:WARN No app年“dws couId b? found fcr logger (org.. tog4]:WAfthi Please inKuhze the Iog4| 5ystem property. tag4jiWARW hi(pi//1Ao1.2/faq.Kcm^noconfig fa /user/tiny^teKl.tJtt 不存在. /usr/lo^1/hadoop/textAx(已上祷至 /userAlnyftexc.txt 从HDFS中下载指定文件,如果本地文件与要下载的文件名称相同,则自动对 下载的文件重命名; Shell命令: wen@ubuntu:/usr/lacol/hadoap/btn$ export PATH=$PATH:/usr/Locat/hadoop/bin wen@ubuntu:/usr/locaL/hddoop/bin$ if S(hadoop f$ -test *e /u^r/local/hadoop/tex t.txt); a then $(hadoop fs -copyToLo匚al text?txt ./text?txt); a else ${hadoop fs -copyToLccal text * txt */text2.tx

文档评论(0)

1亿VIP精品文档

相关文档