大数据学习必备前置知识——Linux之shell大家好！在为您带来精彩的技术干货之前，先给您推荐一个我精心运营的公众号[大数据深度洞察]。在这里，您将获取更多独家的技术分享、实用案例以及行业前沿资讯。亲爱的读者们，当您准备开启这篇充满价值的技术文章之旅时，不妨先关注我的公

部署伪分布式Hadoop集群一、JDK安装配置1.1下载JDK1.2上传解压1.3java环境配置二、伪分布式Hadoop安装配置2.1Hadoop下载2.2上传解压2.3Hadoop文件目录介绍2.4Hadoop配置2.4.1修改core-site.xml配置文件2.4.2修改hdfs-site.xml配置文件2.4.3修改ha

1.环境准备1.1版本选择序号bigdata-001bigdata-002bigdata-003bigdata-004bigdata-005MySQL-8.0.31mysqlDataxDataxDataxDataxDataxDataxSpark-3.3.1SparkSparkSparkSparkSparkHive-3.1.3HiveHive1.2主要组件官网hive官网：htt

 查看节点状态#查看节点状态[root@hadoop1bin]#hdfshaadmin-getServiceStatenn1standby[root@hadoop1bin]#hdfshaadmin-getServiceStatenn2active[root@hadoop1bin]#pwd/root/tools/hadoop/tools/hadoop/bin将NN2切换为Standby备用节点hdfshaadmin

整体架构图 服务台账 hadoop1hadoop2hadoop3 172.23.112.160172.23.112.161172.23.112.162HDFSNameNodeDataNodeHDFSNameNodeHTTPUI：9870HDFSDataNodeHTTPUI：9864DataNodeSecondaryNameNodeDataNode http://hadoop1:9870/dfshealth.html#tab-o

关闭防火墙systemctlstopfirewalldsystemctldisablefirewalld.service创建操作用户useraddhduserpasswdhduser#编辑文件vim/etc/sudoers添加hduserA

1、添加hadoop1用户组[root@localhost~]#groupaddhadoop12、添加hadoop1用户，并设置密码[root@localhost~]#useradd-ghadoop1hadoop1[root@localhost~]#passw

Hadoop是一个开源的分布式计算和存储框架，由Apache基金会开发和维护。Hadoop为庞大的计算机集群提供可靠的、可伸缩的应用层计算和存储支持，它允许使用简单的编程模型跨

NIFI+外部zookeeper集群部署 1、配置jdk环境使用rpm-qa|grepjdk指令查看服务器是否安装过jdk,这里一般用于卸载openjdk,[root@hadoop1~]#rpm-qa|grepjava 1.1、

@目录安装部署安装方式Local(Standalone单机部署)Standalone部署StandaloneHA部署FlinkOnYarn演示案例概述会话（Session）模式单作业（Per-Job）模式流程演示应用（Application）