首页 > 其他分享 >8.19第七周总结

8.19第七周总结

时间:2023-08-20 09:35:15浏览次数:34  
标签:总结 hdfs fs aaa 第七 jdk hadoop 8.19 tar

-help:输出这个命令参数:
hdfs dfs -help rm
2. -ls: 显示目录信息:
hadoop fs -ls /
3. -mkdir:在hdfs上创建目录:
hadoop fs -mkdir -p /aaa/bbb/cc/dd
4. -moveFromLocal从本地剪切粘贴到hdfs:
hadoop fs - moveFromLocal /home/hadoop/a.txt /aaa/bbb/cc/dd
5. -moveToLocal:从hdfs剪切粘贴到本地:
hadoop fs - moveToLocal /aaa/bbb/cc/dd /home/hadoop/a.txt
6. -appendToFile :追加一个文件到已经存在的文件末尾:
hadoop fs -appendToFile ./hello.txt /hello.txt
7. -cat :显示文件内容
8. -tail:显示一个文件的末尾:
hadoop fs -tail /weblog/access_log.1
9. -text:以字符形式打印一个文件的内容:
hadoop fs -text /weblog/access_log.1
10. -chgrp 、-chmod、-chown:linux文件系统中的用法一样,修改文件所属权限:
hadoop fs -chmod 666 /hello.txt
hadoop fs -chown someuser:somegrp /hello.txt
11. -copyFromLocal:从本地文件系统中拷贝文件到hdfs路径去
hadoop fs -copyFromLocal ./jdk.tar.gz /aaa/
12. -copyToLocal:从hdfs拷贝到本地
hadoop fs -copyToLocal /aaa/jdk.tar.gz
13. -cp :从hdfs的一个路径拷贝到hdfs的另一个路径
hadoop fs -cp /aaa/jdk.tar.gz /bbb/jdk.tar.gz.2
14. -mv:在hdfs目录中移动文件
hadoop fs -mv /aaa/jdk.tar.gz /
15. -get:等同于copyToLocal,就是从hdfs下载文件到本地
hadoop fs -get /aaa/jdk.tar.gz
16. -getmerge :合并下载多个文件,比如hdfs的目录 /aaa/下有多个文件:log.1, log.2,log.3,...
hadoop fs -getmerge /aaa/log.* ./log.sum
17. -put:等同于copyFromLocal
hadoop fs -put /aaa/jdk.tar.gz /bbb/jdk.tar.gz.2
18. -rm:删除文件或文件夹
hadoop fs -rm -r /aaa/bbb/
19. -rmdir:删除空目录
hadoop fs -rmdir /aaa/bbb/ccc
20. -df :统计文件系统的可用空间信息
hadoop fs -df -h /
21. -du统计文件夹的大小信息
hadoop fs -du -s -h /aaa/*
22. -count:统计一个指定目录下的文件节点数量
hadoop fs -count /aaa/
23. -setrep:设置hdfs中文件的副本数量
hadoop fs -setrep 10 /aaa/jdk.tar.gz
这里设置的副本数只是记录在namenode的元数据中,是否真的会有这么多副本,还得看datanode的数量。若目前只有3台设备,最多也就3个副本,只有节点数的增加到10台时,副本数才能达到10。

标签:总结,hdfs,fs,aaa,第七,jdk,hadoop,8.19,tar
From: https://www.cnblogs.com/XiMenXve/p/17643597.html

相关文章

  • 鱼皮聚合搜索项目总结
    鱼皮聚合搜索项目笔记+收获一、收获:1、使用AXIOS向后端发送请求语法:myAxios.post("search/all",query).then((res:any)=>{}post请求方式search/all请求后端的路径query请求的参数res响应回来的数据2、爬虫,如何爬虫:方法:HttpClient、OKHttp、RestTemplate、HuTool......
  • Django 登录页面优化的报错总结
    Django登录页面优化的报错总结在登录页面进行优化过程中,遇到的一些报错这边总结了一些希望会对读者有所帮助。调用new_key=CaptchaStore.generate_key()报错在调用CaptchaStore.generate_key()时出现错误,请确保您已正确设置了django-simple-captcha库。请按照以下步骤检查......
  • 8.19
    首先是关于方法的内存分配;栈内存是先进后出的.先调用的方法先进入站空间,然后后进入的方法先销毁;基本数据类型,会在栈空间中开辟一个单独的空间存放数据,不过引用数据如数组,字符串,要在堆空间中开辟空间,同时将存储数据的空间的地址放到栈空间中需要调用时通过地址值访问数据.......
  • 闲话8.19
    今天好像又摆了一天......
  • 第六周总结
    周一:明确学习目标和资源准备本周的第一天,我将明确自己的学习目标,确定学习重点和方向。我计划阅读相关的大数据领域的书籍和文档,如《大数据导论》、《Hadoop权威指南》等,以了解各种大数据技术和工具的基本概念和应用场景。此外,我也会寻找一些在线学习资源和教程,如网课、博客和视频......
  • 暑假周记(8.19)
    来到了学校,啧,想念龙山的第一天Math&Number1 xxxValue()将Number对象转换为xxx数据类型的值并返回。2 compareTo()将number对象与参数比较。3 equals()判断number对象是否与参数相等。4 valueOf()返回一个Number对象指定的内置数据类型5 toString()以字符串形式返回值。6 pars......
  • 2023.8.19-假期周进度报告
    本周,主要进行暑期社会调查内容的思考和基本社会调查报告的编写,下周准备继续完成暑期社会调查报告和调查日志的编写,并按要求将它们抄到纸上。本周日,思考社会调查的主题,完成了社会调查的主题,遇到了社会调查写什么好呢的问题,解决方法是想到既然在揽月湾附近,就以揽月湾为主题写一个社......
  • 第六周总结
    本周没有学习多长时间,因为我这周在练车,准备考科目二,每天早上六点到晚上七点到家,再加上吃饭的时间,因此留给我学习的时间很少,并且我也不想学习,因为练车很累,这一周基本都是这样,所以我只能偶尔复习复习课程,代码这周也没写多少。关于本周学习遇到的困难,没有,因为我学习的时间很少并且也......
  • 【路飞项目总结指南】
    【一】路飞项目Gitee链接【1】Gitee之路飞项目前端【2】Gitee之路飞项目后端【二】企业项目相关知识介绍企业级项目介绍【三】路飞项目前期准备【1】前期需求分析【2】虚拟环境介绍与搭建【四】路飞项目搭建准备【1】后端创建项目【2】搭建数据库相关【3】封装全局logg......
  • 8.19日
    我始终觉得人是需要写一些东西给自己看的。日记里的假话,是真心也好,愤怒、悲伤还是喜悦,都像是匆忙的岁月里值得纪念的点滴,在我垂垂老矣,早已记不清18岁拥有怎样的故事,为何流泪,爱过谁,可我的日记告诉我,我曾热烈而无畏地活着。我没有得到从一而终的偏爱,没有踏足过那片祈盼已久的净......