首页 > 其他分享 >搭建Hadoop伪分布模式环境实验

搭建Hadoop伪分布模式环境实验

时间:2022-10-13 10:11:48浏览次数:59  
标签:Web HDFS ip Hadoop 分布模式 输入 搭建

我使用的是Finalshell,不是Xshell,各位可以参考一下

1.首先,开启虚拟机,等待连接成功,输入"start-all.sh"启动HDFS,Yarn,然后输入jps查看进程是否正常

2.打开HDFS Web界面,在本地浏览器输入namenode节点服务器的ip或域名+端口(例如:我用是edge,namenode节点服务器的ip改成了node1【纯属想偷懒】,就可以看到HDFS集群的概述,如果不知道自己的ip话,输入命令"ifconfig"就可以查看自己的ip了,例如:

 

这是HDFS的Web页面

这是Yarn的Web页面

3.运行mapreduce,查看程序是否正常

 首先,cd到mapreduce中

通过示例计算圆周率pi,输入"hadoop jar ..."或者"yarn jar..."

计算圆周率pi时,可以适当地增大后面两个数,让计算变得更准确,但相应的计算时间也会增加

标签:Web,HDFS,ip,Hadoop,分布模式,输入,搭建
From: https://www.cnblogs.com/feng-233/p/16787166.html

相关文章