• 2024-04-27Hadoop集群模式的搭建之二:配置Hadoop平台基础环境
    在进行Hadoop集群的安装部署之前,需要对虚拟机进行一些基础环境配置。例如,为了在集群中识别主机,需要配置主机和IP地址的映射关系;为了使用Web相关的服务和访问连接,需要在集群中关闭并禁用防火墙功能;为了减少节点之间访问时人工输入用户密码,需要配置SSH免密登录;为了集群节点的时间能
  • 2024-04-25大数据平台搭建手册——hadoop
    从0开始超详细搭建hadoop平台手册创建三台使用centos7操作系统的虚拟机基础环境配置ps:不建议使用DHCP,因为ip地址会变动配置ip1.master[root@master~]#nmcliconnectionaddifnameens32con-nameens32autoconnectyestypeethernetipv4.methodmanualipv4.add
  • 2023-11-11如何在多台Linux系统主机上实现ssh免密访问——成公钥文件id_rsa.pub(数字签名RSA)
     假设共有三台Linux主机,为matser,slave1,slave2,现在要实现master主机可以ssh免密访问master主机自身以及slave1、slave2。 原理:主机 ssh-keygencat/root/.ssh/id_rsa.pub>/root/.ssh/authorized_keysssh-copy-idroot@slave1ssh-copy-idroot@slave2
  • 2023-04-25服务器之间实现免密登录的简易教程
    今天这篇文章主要是教会大家如何实现服务器之间的免密登录。1、先在所有服务器上执行命令:ssh-keygen-tdsa-P''-f~/.ssh/id_dsamaster服务器slave1服务器slave2服务器2、而后在所有服务器上执行命令:cat/.ssh/id_dsa.pub>>/.ssh/authorized_keysmaster服务器slave1服务器
  • 2023-04-20strom
    解压storm包配置storm环境变量#STORM_HOMEexportSTORM_HOME=/usr/local/src/stormexportPATH=$PATH:$STORM_HOME/bin配置storm.yamlstorm.zookeeper.servers:-"master"-"slave1"-"slave2"nimbus.seeds:["master
  • 2023-02-25Hadoop3 HDFS HA 高可用搭建及测试
    1.什么是HAHA是HighAvailability的简写,即高可用,指当当前工作中的机器宕机后,会自动处理这个异常,并将工作无缝地转移到其他备用机器上,以保证服务的高可用。Hadoop的HA模
  • 2023-01-19ShardingSphere实现读写分离
    把思考付诸实践,以实践提升思考文章目录​​前提条件​​​​1、创建SpringBoot程序​​​​1.1、创建项目​​​​1.2、添加依赖​​​​1.3、创建实体类​​​​1.4、创建M
  • 2022-09-24hbase
    hbase.rootdirhdfs://master:9000/hbasehbase.zookeeper.property.dataDir/home/hadoop/zookeeperhbase.cluster.distributedtruehbase.zookeeper.quorummas