首页 > 其他分享 >学习汇报7 hdfs集群角色属性

学习汇报7 hdfs集群角色属性

时间:2022-08-31 09:11:33浏览次数:66  
标签:hdfs 存储 角色 datanode namenode 数据 集群 属性

主从角色

namenode :

核心,架构中的主角色

管理和维护文件系统的元数据,包括目录树结构、文件和块的位置信息、访问权限等信息

namenode是访问hdfs的唯一入口

仅存储元数据

知道hdfs中文件的块列表及其位置

不持久化存储位置信息

如果发生故障属于单点故障

通常会配置大量的内存

datanoede:

从角色,负责具体的数据块存储

负责数据块block的存储

datanode启动时,注册自己到namenode并且汇报自己负责的块列表

某个datanode关闭时,不会影响数据的可用性。namenode将安排由其他datanode管理的块进行副本复制

需要大量的磁盘空间

 

 

secondary namenode:

namdenode的辅助节点,但是并不能代替namenode

帮助主角色进行元数据文件的合并动作。

 

标签:hdfs,存储,角色,datanode,namenode,数据,集群,属性
From: https://www.cnblogs.com/diandianzai/p/16641760.html

相关文章

  • 2022 年 8 月前端更新:TypeScript、软件设计模式、焦点样式和单个 CSS 转换属性中的 SO
    2022年8月前端更新:TypeScript、软件设计模式、焦点样式和单个CSS转换属性中的SOLID原则本月我们将介绍TypeScript中的SOLID原则、React应用程序的软件设计模......
  • 读写分离集群的手动搭建
    1部署规划读写分离集群适合读多写少的应用环境。Ip规划主机名服务ip数据库名实例名DM_Z192.168.48.131DMSERVERDM01DM_B192.168.48......
  • 静态——字段与属性、方法与类、单例设计模式
    1、static关键字static关键字,用于修饰类,字段,属性,方法,构造方法等。被static修饰的类称之为“静态类”;被static修饰的成员称之为“静态成员”;被修饰过的成员分别称为:......
  • Webdriver浏览器属性
    请参照https://www.cnblogs.com/wrwangrong/p/16428981.htmlfromselenium.webdriverimportChromefromwebdriver_helperimportget_webdriverdriver=get_webdriv......
  • numpy基本属性,numpy创建array
    基本属性importnumpyasnparray=np.array([[1,2,3],[4,5,6]])array.dtype返回矩阵的数据类型array.ndim返回该矩阵是几维的array.size返回矩阵的大小(元素的......
  • dm8实时主备集群搭建
    1.1、守护进程守护进程(dmwatcher)是DM数据守护系统不可或缺的核心部件,是数据库实例和监视器之间信息流转的桥梁。数据库实例向本地守护进程发送信息,接收本地守护进程的消......
  • After Effects 教程,如何在 After Effects 中使用属性关联器?
    欢迎观看AfterEffects中文版教程,小编带大家学习AfterEffects的基本工具和使用技巧,了解如何在AE中使用属性关联器。让任何图层或效果的一个参数由另一个参数驱动,根......
  • docker swarm集群中,task是什么意思?
    你在查看dockerswarm文档的时候,是不是经常听说task这个词,是什么意思呢? 非常,非常的简单: 在dockerswarm中,service中的容器,就叫做task. Container=task ......
  • 如何在docker swarm集群中部署一个service?
     如果你想知道,如何在dockerswarm集群中部署一个service,那么你需要仔细的阅读下面的文章····· 1、前提 如果想要完成本次文章的内容,你首先需要一个swarm集群......
  • 暑假学习6 hdfs shell命令
    命令行操作:cliHadoop的命令shell:Hadoopfs-lsfile:          操作本地的文件系统hadoopfs-lshdfs://node1:8020         ......