【hadoop】hadoop 2.x HA 高可用

时间：2024-07-13 09:28:17浏览次数：7

在这里插入图片描述

1.概述

Hadoop 2.0之前，在HDFS集群中 NameNode 存在单点故障（SPOF）。对于只有一个NameNode 的集群，若NameNode 机器出现故障，则整个集群将无法使用，直到NameNode 重新启动。

NameNode 主要在以下两个方面影响HDFS集群

NameNode 机器发生意外，如宕机，集群将无法使用，直到管理员重启
NameNode 机器需要升级，包括软件、硬件升级，此时集群也将无法使用

HDFS HA 功能通过配置Active/Standby 两个NameNodes 实现在集群中对NameNode 的热备来解决上述问题。如果出现故障，如机器崩溃或机器需要升级维护，这时可通过此种方式NameNode 很快的切换到另外一台机器

在这里插入图片描述

2.架构图详解

在这里插入图片描述

标签：HDFS,机器,可用,hadoop,集群,NameNode,HA
From： https://blog.csdn.net/qq_21383435/article/details/140216158

【大白话讲清楚：什么是 Langchain 及其核心概念】
文末有福利！在AI和机器学习领域，每天都有新技术和框架涌现。今天，我们来聊聊最近引起广泛关注的一个框架——Langchain。https://python.langchain.com/docs/get_started/introduction那么，Langchain到底是什么，它为什么这么受欢迎，以及它是如何工作的呢？别担心，我会用大白话......
10-Hashtable底层结构和源码分析
10-Hashtable底层结构和源码分析介绍汇总：Hashtable的基本介绍Hashtable底层机制说明Hashtable和HashMap对比1-Hashtable的基本介绍存放的元素是键值对：即K-VHashtable的键和值都不能为null，不然后抛出NullPointerException异常Hashtable使用方法基本上和Hash......
SAP S/4 HANA CLOUD ES 总账科目-未清项目管理
SAPESSAPES为SAPS/4HANACLOUD的公有云版本SAP官方名称为SAPS/4HANACloudPublicEdition以下简称ES，ES为纯公有云架构。在实施过程中经常会有如下业务场景，例如租房押金等，在支付押金后希望生成如下凭证：借：其他应收款-XXX租房押金贷：银行存款而在退租时希......
Letter Exchange
这道题目看官方题解就好了，这个转换图论挺显然的证明一下为什么最后一定是显然练完贬值后图只能长成这个样子在消掉长度为\(2\)的环后，如果说图没边了，那么显然就不用交换了，否则的话我们任取一条边那么对于\(2\)号点来说，要么没出边，要么出边的终点是\(3\)号点（因为没有长度为\(2......
Hacknos-Player V1.1打靶渗透【附POC】
1.信息收集：1.1.主机扫描nmap-sn'192.168.7.0/24'|grep-B2'08:00:27:C9:02:09'1.2.端口扫描80、3306nmap-p-192.168.7.991.3.目录扫描dirsearch-u192.168.7.991.4.操作系统等敏感信息查看2.漏洞扫描+漏洞利用2.1.老规矩，进入主页点击可能存在......
tryhackme-Buffer Overflow Prep(缓冲区溢出准备)
前景概述最开始接触二进制方式是因为参加比赛缺少一个pwn手，慢慢的学习在二进制方面懂了很多，学习了C和C++、基本的汇编语法、pwndbg、ollydbg等调试工具，以及在做pwn题目是相关的工具pwntools,学习了栈相关的基本知识，栈溢出相关的一些姿势，例如:ret2text、ret2plt、ret2shellcode、......
7-LinkedHashSet底层结构和源码分析
7-LinkedHashSet底层结构和源码分析介绍汇总：LinkedHashSet全面说明LinkedHashSet底层机制说明1-LinkedHashSet全面说明LinkedHashSet底层是一个LinkedHashMap，底层维护了一个数组+双向链表。由于LinkedHashMap是继承HashMap的所有特性的，其双向链表是在原本的数......
Redis的哨兵和集群实现高可用
一个典型的高可用Redis集群示例配置1个主服务器2-3个从服务器3-5个哨兵哨兵和集群就是为了高可用哨兵哨兵的功能：监听和故障转移（1）客户端可以从哨兵获得集群的状态。（2）当主服务器断开，哨兵可以进行选举主服务器。哨兵的工作流程在配置中，设置master的ip和端口创建maste......
LDAPWordlistHarvester：基于LDAP数据的字典生成工具
关于LDAPWordlistHarvesterLDAPWordlistHarvester是一款功能强大的字典列表生成工具，该工具可以根据LDAP中的详细信息生成字典列表文件，广大研究人员随后可以利用生成的字典文件测试目标域账号的非随机密码安全性。工具特征1、支持根据LDAP中的详细信息生成字典文件：其中包......
在ubantu系统中部署ChatGLM-6B
ChatGLM-6B介绍ChatGLM-6B是一个开源的、支持中英双语的对话语言模型，基于GeneralLanguageModel(GLM)架构，具有62亿参数。结合模型量化技术，用户可以在消费级的显卡上进行本地部署（INT4量化级别下最低只需6GB显存）。ChatGLM-6B使用了和ChatGPT相似的技术，针对中文问答......

【hadoop】hadoop 2.x HA 高可用

1.概述

2.架构图详解

相关文章

赞助商

阅读排行