首页 > 其他分享 >云计算-hadoop的安装(书接上回+分布式搭建)

云计算-hadoop的安装(书接上回+分布式搭建)

时间:2023-11-04 16:44:38浏览次数:31  
标签:xml 如图所示 接上 hadoop yarn site sh 分布式

书接上回,这次来进行分布式集群的搭建。

 

执行命令:echo $JAVA_HOME

查看路径,我的路径如图所示:

 

 

然后在/usr/local/hadoop目录下,执行命令gedit ./etc/hadoop/hadoop-env.sh

打开文本,然后再第一行添加刚刚的路径,如图所示:

 

 

因为之前一节咱们已经配置过hdfs-site.xml和core-site.xml,所以这里不需要再配置了。

可以再尝试一下hadoop有没有启动:./sbin/start-dfs.sh

发现也是ok的(出来这4个值)

 

关闭的命令是:./sbin/stop-dfs.sh

 

 

-------------------------------接着步入正题!----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------

1.再创建hadoop用户组,并且把启动shell保存在/bin/bash(其实和上一章刚开始一模一样)(我这里取的名字叫hadoop_1)

 

2.查看主机名字,hostname,我这里得到的自己的主机名字是:keith-VirtualBox(如上图,框框下面的第一句代码)

3.配置yarn.

执行命令:gedit ./etc/yarn-site.xml

打开文本框后,修改内容并且保存,为如图所示:(!!!!注意,倒数第二行,value里面填写的是刚刚hostname得到的自己的主机名字!!!!!)

 

接着执行命令:gedit ./etc/mapred-site.xml

打开文本框后,修改内容并且保存,如图所示:

 

 

4.启动yarn,输入命令:./sbin/start-yarn.sh

再jps,发现多了两个值

 

5.在浏览器输入:主机名:8088,我输入的是keith-VirtualBox:8088,如图所示:

 

 

--------------------------------------------------------------------------------------------------------------------------------------------------------------------

 

标签:xml,如图所示,接上,hadoop,yarn,site,sh,分布式
From: https://www.cnblogs.com/KeithTee/p/17799580.html

相关文章

  • java——redis随笔——实战——分布式缓存——哨兵
                                                                           ......
  • java——redis随笔——实战——分布式缓存——主从
                                                                               ......
  • Jmeter分布式测试的注意事项和常见问题
    Jmeter分布式测试的注意事项和常见问题Jmeter是一款开源的性能测试工具,使用Jmeter进行分布式测试时,也需要注意一些细节和问题,否则可能会影响测试结果的准确性和可靠性。Jmeter分布式测试时需要特别注意的几个方面1.参数化文件的位置和内容如果使用csv文件进行参数化,即通过......
  • java——redis随笔——实战——分布式缓存
    在使用Redis过程中,持久化是一项非常重要的功能,因为如果RedisServer停止工作,所有的数据将全部丢失。 为了避免这种情况的出现,我们需要将Redis中的数据保存在硬盘上,以保证数据不受服务器宕机影响。 Redis提供了两种持久化方式——RDB和AOF。    笔者将会以RDB与AOF......
  • APM建设踩了哪些坑?去哪儿旅行分布式链路追踪系统实践
    一分钟精华速览分布式链路追踪系统在企业的APM体系中扮演着重要的角色。本文分享了去哪儿旅行构建分布式链路追踪系统的实践经验。从APM整体架构设计入手,讲述了日志收集、Kafka传输和Flink任务处理等环节的性能优化实践和踩坑经验。同时,作者结合丰富的分布式系统架构经验,探讨了AP......
  • ElasticSearch【分布式锁】
    一、简介    ES在多线程并发访问修改情况下会用到锁机制。大致分为乐观锁和悲观锁。二、乐观锁    通过_version来记录文档版本。在文档创建时会有一个初始version,默认为1.对文档修改或者删除时,version会递增,也可以指定。只有当版本号大鱼当前版本时,才会修改或者......
  • 分布式锁【Redission】
    一、简介    Redission,一个基于Redis实现的分布式工具,为Redis官网分布式解决方案。    Redisson提供了使用Redis的最简单和最便捷的方法。Redisson的宗旨是促进使用者对Redis的关注分离(SeparationofConcern),从而让使用者能够将精力更集中地放在处理业务逻辑......
  • zabbix分布式监控部署proxy安装
    1、编译安装zabbixproxy123# tar -zxvf zabbix-4.2.8.tar.gz# cd zabbix-4.2.8/# ./configure --prefix=/usr/local/zabbix-4.2.8--enable-proxy --with-mysql --with-net-snmp --with-libcurl报错如下:configure:error:InvalidNet-SNMPdi......
  • Seata 分布式事务服务器搭建
    1.Seata安装包下载网址:https://github.com/seata/seata/releases下载:seata-server-1.5.2.zip2.Seata配置文件修改解压安装包,seata/conf文件夹找到application.yml配置文件,修改如下:server:port:7091spring:application:name:seata-serverlogging:c......
  • 分布式任务调度(00)-xxlJob综述
    1配置属性1.1执行器任务的绑定的执行器:任务触发调度时,将自动发现注册成功的执行器,实现任务自动发现也方便进行任务分组每个任务须绑定一个执行器,可在"执行器管理"设置。1.2任务描述便于任务管理1.3路由策略当执行器集群部署时,提供的路由策略FIRST(第一个):固定选......