首页 > 其他分享 >2023-07-30~08-05第四周暑假生活

2023-07-30~08-05第四周暑假生活

时间:2023-08-05 21:13:01浏览次数:41  
标签:bin hdfs HDFS 07 05 08 hadoop input 目录

本周每天学习一个小时hdfs,web设计

hdfs和linux的操作主要用到命令窗口,大量陌生的命令操作是学习的一大难点

主要学习了:

hdfs的目录操作

cd /usr/local/hadoop
./bin/hdfs dfs -mkdir -p /user/hadoop

在HDFS中创建一个“/user/hadoop”目录,“–mkdir”是创建目录的操作,“-p”表示如果是多级目录,则父目录和子目录一起创建,这里“/user/hadoop”就是一个多级目录,因此必须使用参数“-p”,否则会出错。

 

./bin/hdfs dfs -ls .

“-ls”表示列出HDFS某个目录下的所有内容,“.”表示HDFS中的当前用户目录

 

./bin/hdfs dfs -ls

列出HDFS上的所有目录

 

./bin/hdfs dfs -mkdir /input

创建input目录

 

./bin/hdfs dfs -rm -r /input

删除input目录

 

./bin/hdfs dfs -put /home/hadoop/myLocalFile.txt  input

把本地文件系统的“/home/hadoop/myLocalFile.txt”上传到HDFS中的当前用户目录的input目录下

 

./bin/hdfs dfs -cat input/myLocalFile.txt

查看HDFS中的myLocalFile.txt这个文件的内容

 

http://localhost:9870访问HDFS的web管理界面

Linux下的Java编程(除了虚拟机不太习惯以外,跟平时编程没什么区别)

Java对hadoop进行管理,需要在工程中添加hadoop里的Jar包(/usr/local/hadoop/share/hadoop/common)

 

标签:bin,hdfs,HDFS,07,05,08,hadoop,input,目录
From: https://www.cnblogs.com/xxaxf/p/17608616.html

相关文章

  • 20230805 Datawhale第一次直播笔记
    机器学习上分技巧内容解析subtask是并列的,并且取最优,那么只需要针对最优进行优化转化为回归问题是否会更加准确数据分析和特征工程是非常关键的部分数据探索性分析(EDA):数据集大小,字段类型缺失值情况特征是否冗余是否存在时间信息标签的分布训练集测试集的分布单变量/......
  • GFOJ-1808 牛奶访客
    题面题目描述FarmerJohn计划建造\(N\)(\(1\leqN\leq10^5\))个农场,用\(N−1\)条道路连接,构成一棵树(也就是说,所有农场之间都互相可以到达,并且没有环)。每个农场有一头奶牛,品种为更赛牛或荷斯坦牛之一。FarmerJohn的\(M\)个朋友(\(1\leqM\leq10^5\))经常前来拜访他。......
  • 备控N5105 G30B安装群晖
    1.安装前准备1.1.硬件准备U盘2.5寸,7-9mm,机械SATA硬盘(倍控送的SATA线很长,极难安装......
  • 王道408用数组,链表以及双向链表实现栈、队列
    我在电脑上敲了一遍,又在纸上模拟了一遍下面记录在电脑上敲的:一、用数组实现栈#include<stdio.h>#include<string.h>#defineMaxSize50typedefstruct{intdata[MaxSize];inttop;}stack;voidInitStack(stack&S){S.top=-1;S.data[0]=5;......
  • [oeasy]python0079_控制序列_光标位置设置_ESC_逃逸字符_CSI
    光标位置回忆上次内容上次我们研究的比较杂类型转化进制转化捕获异常版本控制生成帮助文档变量的常用类型变量的生命周期控制数据类型主要研究了两个字符串str整型数字int字符串型和整型数字型变量是可以相互转化的加法运算逻辑会根据操作变量的不同而不同整型变量的加法是......
  • [oeasy]python0079_控制序列_光标位置设置_ESC_逃逸字符_CSI
    光标位置回忆上次内容上次我们研究的比较杂类型转化进制转化捕获异常版本控制生成帮助文档变量的常用类型变量的生命周期控制 数据类型主要研究了两个字符串str 整型数字int  字符串型和整型数字型变......
  • 05服务拆分-案例Demo
    下载对应初始项目cloud-demo链接:https://pan.baidu.com/s/1NpovDVLj8ZSrDjt2seID2A?pwd=dp3f提取码:dp3f准备数据库dockerpsdockerexec-it6d542566d077/bin/bashpsql'host=localhostport=5432user=postgresdbname=postgres'createdatabasecloud_order;cre......
  • [2023本地存储方案](https://www.cnblogs.com/fangchaoduan/p/17608006.html)
    2023本地存储方案本地存储方案cookie本地存储:有期限的限制,可以自己设置过期期限。在期限内,不论页面刷新还是关闭,存储的信息都还会存在。localStorage本地持久化存储:页面刷新或者关闭,存储的信息一直存在,除非手动清除或者卸载浏览器,而且没有有效期的限制。sessionSto......
  • 1075 - 寻找2的幂
    题目描述数学上把2的K次方叫2的K次幂,如4、8、32等。给定一个整数n,请输出距离它最近的那个2的幂是多少。如果有两个距离相同,输出那个小的。输入只有一个整数n(10≤n≤2×10^9)输出只有一个整数,表示距离最近的那个2的幂。 样例输入17输......
  • 谨科E-522 配置拉满的NAS主机 (N5105、四个8125B、双M2、5盘位)
    先看下这个大家伙的外观  优秀的背板,支持顺序上电,顺序启动 后面 主板 这个主板和我们的畅网也比较像重点来了,给他安装一个群晖系统试试  没问题可以安装  等待中 ......