题目：

熟悉常用的Linux操作和Hadoop操作

姓名:

刘雪超

日期：2024.11.4

实验环境：虚拟机node1-VMware,hadoop3.4.0以及Finalshell4.3.10

实验内容与完成情况：一、熟悉常用的Linux操作

1. cd命令：切换目录

cd /usr/local             # 切换到目录“/usr/local”

cd ..                     # 切换到当前目录的上一级目录

cd ~                      # 切换到当前登录用户的主文件夹

2.ls命令：查看文件与目录

ls /usr                # 查看目录“/usr”下的所有文件和目录

3.mkdir命令：新建目录

cd /tmp                          # 进入“/tmp”目录

mkdir a                          # 创建名为“a”的目录

ls /tmp                          # 查看“/tmp”目录下的所有文件和目录

mkdir -p a1/a2/a3/a4        # 进入“/tmp”目录并创建目录“a1/a2/a3/a4”

4.rmdir命令：删除空的目录

rmdir a                                # 将创建的目录a删除

rmdir a1/a2/a3/a4                      # 删除创建的目录“a1/a2/a3/a4”

ls /tmp                               # 查看“/tmp”目录下的目录

5.cp命令：复制文件或目录

cp ~/.bashrc /usr/bashrc1  # 将.bashrc复制到“/usr”下，并重命名为bashrc1

mkdir /tmp/test            # 在“/tmp”下新建目录test

cp -r /tmp/test /usr      # 将test目录复制到“/usr”目录下

6.mv命令：移动文件与目录，或更名

mv /usr/bashrc1 /usr/test/         # 将bashrc1移动“/usr/test”目录下

mv /usr/test /usr/test2           # 将“/usr/test”目录重命名为test2

7.rm命令：移除文件或目录

rm /usr/test2/bashrc1     # 将“/usr/test2”目录下的bashrc1文件删除

rm -r /usr/test2          # 将“/usr/test2”目录删除

8.cat命令：查看文件内容

cat ~/.bashrc         # 查看当前用户主文件夹下的.bashrc文件内容

9.tac命令：反向查看文件内容

tac ~/.bashrc                # 反向查看.bashrc文件的内容

10.more命令：一页一页翻动查看

more ~/.bashrc                # 翻页查看.bashrc文件的内容

11.head命令：取出前面几行

head -n 20 ~/.bashrc              # 查看.bashrc文件前20行内容

head -n -50 ~/.bashrc             # 查看.bashrc文件内容，后面50行不显示

12.tail命令：取出后面几行

tail -n 20 ~/.bashrc             # 查看.bashrc文件最后20行

tail -n +51 ~/.bashrc            # 只列出.bashrc文件50行以后的数据

13.touch命令：修改文件时间或创建新文件

touch /tmp/hello                 # 在“/tmp”目录下创建一个空文件hello

ls -l /tmp/hello                 # 查看文件时间

touch -d "5 days ago" /tmp/hello  # 修改hello文件，将文件时间整为5天前

14.chown命令：修改文件所有者权限

sudo chown root /tmp/hello       # 将hello文件所有者改为root账户

ls -l /tmp/hello                # 查看hello文件的属性

15.find命令：文件查找

find ~ -name ".bashrc"       # 找出主文件夹下文件名为.bashrc的文件

16.tar命令：压缩命令

sudo mkdir /test                # 在根目录创建文件夹test

sudo tar -czvf /test/test.tar.gz --directory=/ test   # 将/test打包成test.tar.gz

sudo tar -xzvf /test/test.tar.gz -C /tmp # 将压缩包解压缩到“/tmp”目录

17.grep命令：查找字符串

grep 'examples' ~/.bashrc    # 从“~/.bashrc”文件中查找字符串'examples'

18.配置环境变量

echo "export JAVA_HOME=/path/to/java" >> ~/.bashrc  # 配置Java环境变量

source ~/.bashrc                           # 使配置立即生效

echo $JAVA_HOME                           # 查看JAVA_HOME变量的值

二、熟悉常用的Hadoop操作

1. 使用hadoop用户登录Linux系统，启动Hadoop

su - root                           # 切换到hadoop用户

cd /export/server/Hadoop-3.4.0/bin           # 进入Hadoop的安装目录

hdfs dfs -mkdir -p /user/hadoop          # 为hadoop用户创建用户目录

start-dfs.sh

2. 在HDFS的目录“/user/hadoop”下创建test文件夹，并查看文件列表

hdfs dfs -mkdir /user/hadoop/test            # 创建test文件夹

hdfs dfs -ls /user/hadoop                    # 查看文件列表

3. 将Linux系统本地的“~/.bashrc”文件上传到HDFS的test文件夹中，并查看test

hdfs dfs -put ~/.bashrc /user/hadoop/test/      # 上传.bashrc文件

hdfs dfs -ls /user/hadoop/test                  # 查看test目录

4. 将HDFS文件夹test复制到Linux系统本地文件系统的“/usr/local/hadoop”目录下

hdfs dfs -get /user/hadoop/test /usr/local/hadoop # 将test文件夹复制到本地文件系统