HDFS 常用操作 使用 hadoop 用户名登录进入 Linux 系统,启动 Hadoop,参照相关 Hadoop 书籍或网络 资料,或者也可以参考本教程官网的“实验指南”栏目的“HDFS 操作常用 Shell 命令”, 使用 Hadoop 提供的 Shell 命令完成如下操作: (1) 启动 Hadoop,在 HDFS 中创建用户目录“/user/hadoop”; (2) 在 Linux 系统的本地文件系统的“/home/hadoop”目录下新建一个文本文件 test.txt,并在该文件中随便输入一些内容,然后上传到 HDFS 的“/user/hadoop” 目录下; (3) 把 HDFS 中“/user/hadoop”目录下的 test.txt 文件,下载到 Linux 系统的本地文 件系统中的“/home/hadoop/下载”目录下; (4) 将HDFS中“/user/hadoop”目录下的test.txt文件的内容输出到终端中进行显示; (5) 在 HDFS 中的“/user/hadoop”目录下,创建子目录 input,把 HDFS 中 “/user/hadoop”目录下的 test.txt 文件,复制到“/user/hadoop/input”目录下; (6) 删除HDFS中“/user/hadoop”目录下的test.txt文件,删除HDFS中“/user/hadoop” 目录下的 input 子目录及其子目录下的所有内容
(1) 启动Hadoop,在HDFS中创建用户目录"/user/hadoop":
start-dfs.sh
hdfs dfs -mkdir /user/hadoop
(2) 在Linux系统的本地文件系统的"/home/hadoop"目录下新建一个文本文件test.txt,并上传到HDFS的"/user/hadoop"目录下:
echo "Some content" > /home/hadoop/test.txt
hdfs dfs -copyFromLocal /home/hadoop/test.txt /user/hadoop/
(3) 将HDFS中"/user/hadoop"目录下的test.txt文件下载到Linux系统的本地文件系统中的"/home/hadoop/下载"目录下:
hdfs dfs -copyToLocal /user/hadoop/test.txt /home/hadoop/下载/
(4) 将HDFS中"/user/hadoop"目录下的test.txt文件的内容输出到终端中进行显示:
hdfs dfs -cat /user/hadoop/test.txt
(5) 在HDFS中的"/user/hadoop"目录下,创建子目录input,将HDFS中"/user/hadoop"目录下的test.txt文件复制到"/user/hadoop/input"目录下:
hdfs dfs -mkdir /user/hadoop/input
hdfs dfs -cp /user/hadoop/test.txt /user/hadoop/input/
(6) 删除HDFS中"/user/hadoop"目录下的test.txt文件,删除HDFS中"/user/hadoop"目录下的input子目录及其子目录下的所有内容:
hdfs dfs -rm /user/hadoop/test.txt
hdfs dfs -rm -r /user/hadoop/input
标签:HDFS,常用,hadoop,实验,user,test,txt,目录 From: https://www.cnblogs.com/DREAM2021/p/17966360