首页 > 数据库 >轻松掌握组件启动之MongoDB(上):高可用复制集架构环境搭建

轻松掌握组件启动之MongoDB(上):高可用复制集架构环境搭建

时间:2023-10-16 10:11:59浏览次数:36  
标签:mongod 架构 MongoDB Primary 复制 组件 data 节点

MongoDB复制集

复制集架构

在生产环境中,强烈不建议使用单机版的MongoDB服务器。原因如下:

单机版的MongoDB无法保证系统的可靠性。一旦进程发生故障或是服务器宕机,业务将直接不可用。此外,一旦服务器上的磁盘损坏,数据会直接丢失,而此时并没有任何副本可用。

为了确保数据的高可用性和冗余性,我们建议使用Mongodb复制集(Replication Set)。复制集由一组Mongod实例(进程)组成,其中包含一个Primary节点和多个Secondary节点。所有的数据写入操作都会被写入Primary节点,并且Secondary节点会从Primary节点同步写入的数据,以保持复制集内所有成员存储相同的数据集。这样可以提供数据的高可用性。复制集的功能依赖于两个方面:

  1. 数据写入时将数据迅速复制到另一个独立节点上,确保数据的冗余性和可用性。
  2. 在接受写入的节点发生故障时,系统能够自动选举出一个新的替代节点,以确保系统的连续性和可用性。

image

在实现高可用性的同时,Mongodb复制集还具有其他几个附加作用:

数据分发:复制集可以将数据从一个区域复制到另一个区域,从而减少另一个区域的读取延迟。

读写分离:复制集还支持读写分离的功能。通过将不同类型的压力分别在不同的节点上执行,可以有效地分担系统的负载。

异地容灾:复制集还可以实现异地容灾。在数据中心发生故障时,可以快速切换到异地部署的节点。

早期版本的MongoDB使用了一种Master-Slave的架构,该做法在MongoDB 3.4版本之后已经废弃。因为Master-Slave 其中Master 宕机后不能自动恢复,只能靠人为操作,可靠性也差,操作不当就存在丢数据的风险。

三节点复制集模式

常见的复制集架构通常由3个成员节点组成,其中存在几种不同的模式,具体取决于配置和需求。

PSS模式(官方推荐模式)

在常见的复制集架构中,PSS(Primary+Secondary+Secondary)模式是一种常见的配置,它由一个主节点和两个备节点组成。

image

在这种模式下,如果主节点不可用,复制集会智能地选择其中一个备节点作为新的主节点,并继续正常的操作。这种自动切换的机制确保了系统的连续性和可用性,同时减少了数据丢失的风险。旧的主节点在可用时重新加入复制集。

image

PSA模式

PSA(Primary+Secondary+Arbiter)模式是一种常见的架构配置。它由一个主节点、一个备节点和一个仲裁者节点组成。

image

在这种PSA模式下,Arbiter节点的主要作用是作为一个仲裁者来参与选举投票。它不存储数据副本,也不提供实际的业务读写操作。因此,即使Arbiter节点发生故障,也不会对业务产生直接影响,只会影响选举投票过程。主节点负责处理所有的业务读写操作,并且有一个完整的数据副本。备节点也存储了一个完整的数据副本,并在主节点故障时承担主节点的角色。而Arbiter节点则参与选举投票,帮助复制集在主节点发生故障时选择一个新的主节点。

image

典型三节点复制集环境搭建

即使只有一台服务器,以单节点模式启动复制集也是一个值得考虑的选择。

  • 单机多实例启动复制集
  • 单节点启动复制集

复制集注意事项

关于硬件:

  • 由于正常的复制集节点都有可能成为主节点,它们的地位是相等的。因此,为了确保系统的稳定性,必须确保各节点的硬件配置保持一致。
  • 为了避免多个节点同时宕机,每个节点使用的硬件必须具有独立性。这样可以保证即使一个节点宕机,其他节点仍然可以正常工作,确保系统的连续性和可靠性。

关于软件:

  • 在复制集中,每个节点的软件版本必须保持一致,这样可以避免出现无法预料的问题。
  • 值得注意的是,增加节点并不会提高系统的写入性能。

环境准备:

  • 安装 MongoDB并正确配置好环境变量
  • 确保你的计算机硬盘上有充足的空间,至少需要10GB或更多的可用空间。

准备配置文件

为了实现复制集的最佳性能和可靠性,建议将复制集的每个mongod进程部署在不同的服务器上。目前我们在一台机器上运行3个进程,因此需要对它们进行以下配置:

  • 配置不同的端口:(28017/28018/28019)
  • 配置不同的数据目录:
mkdir ‐p /data/db1
mkdir ‐p /data/db2
mkdir ‐p /data/db3
  • 配置不同的日志文件路径:(例如:/data/db1/mongod.log)

创建配置文件 /data/db1/mongod.conf 时,你可以进行以下设置:

# /data/db1/mongod.conf
systemLog:
  destination: file
  path: /data/db1/mongod.log
  logAppend: true
storage:
  dbPath: /data/db1
net:
  bindIp: 0.0.0.0
  port: 28017
replication:
  replSetName: rs0
processManagement:
  fork: true

我们可以按照以上步骤修改端口和路径,分别配置 db2 和 db3。请确保配置文件使用 YAML 格式。

启动 MongoDB 进程

mongod ‐f /data/db1/mongod.conf
mongod ‐f /data/db2/mongod.conf
mongod ‐f /data/db3/mongod.conf

注意:如果启用了 SELinux,可能阻止上述进程启动。简单起见请关闭 SELinux。

# 永久关闭,将SELINUX=enforcing改为SELINUX=disabled,设置后需要重启才能生效
vim /etc/selinux/config
# 查看SELINUX
/usr/sbin/sestatus ‐v

总结

在本文中,我们介绍了MongoDB复制集的架构和特点。我们强调了在生产环境中使用单机版MongoDB的风险,并推荐使用复制集来保证数据的高可用性和冗余性。

复制集由一组Mongod实例组成,其中包含一个Primary节点和多个Secondary节点。所有的数据写入操作都会被写入Primary节点,并且Secondary节点会从Primary节点同步写入的数据,以保持复制集内所有成员存储相同的数据集。

最后,我们提供了在典型三节点复制集环境中搭建的步骤和注意事项,包括准备配置文件和启动MongoDB进程。下一章节我们将讲解如何配置复制集和集群安全验证及其连接方式。

标签:mongod,架构,MongoDB,Primary,复制,组件,data,节点
From: https://www.cnblogs.com/guoxiaoyu/p/17742823.html

相关文章

  • 高可用架构之异地多活
    当谈到架构的高可用时,无论是高可用计算架构,还是高可用存储架构,其本质的设计目的都是为了解决部分服务器故障的场景下,如何保证系统能够继续提供服务。但在一些极端场景下,有可能所有服务器都出现故障。例如,典型的有机房断电、机房火灾、地震、水灾……这些极端情况会导致某个系统所......
  • mongoDB​二
    MongoDB中的索引索引就是为了加速查询的,MongoDB的索引几乎与传统的关系型数据库一模一样,这其中也包括一些基本的优化技巧。下面是创建索引的命令:创建索引:db.集合名称.ensureIndex({"name":1})1代表索引升序存储-1代表索引降序存储_id默认自动创建索引注意:该索引被创建后,基......
  • 多文件异步读取.Net组件
    一个高性能、低内存文件上传流.Net组件一个高性能、低内存文件上传流.Net组件   推荐一个用于轻松实现文件上传功能的组件。项目简介一个基于.NET平台的开源项目,提供了一个简单易用的API,可以在Web应用程序中快速集成文件上传功能。优化多部分流式文件上传性能:减......
  • 轻松掌握组件启动之Redis单机、主从、哨兵、集群配置
    单机配置启动Redis安装下载地址:http://redis.io/download安装步骤:1:安装gcc编译器:yuminstallgcc2:将下载好的redis‐5.0.3.tar.gz文件放置在/usr/local文件夹下,并解压redis‐5.0.3.tar.gz文件wgethttp://download.redis.io/releases/redis‐5.0.3.tar.gztarxzfredis......
  • 一组Fabric区块链网络高质量架构图备忘
    图01:两个组织加入同一通道的最简单Fabric网络注意:体会其中Founder的作用。图02:Peer节点分类账内部组件示意图图03:附有链码和账本的Fabric网络示意图图04:具有多个通道的更复杂的Fabric网络示意图图05:Fabric事务调用工作流图06:一种生产环境中的Fabric架构拓扑引用https://www.serial......
  • 轻松掌握组件启动之Redis集群扩展秘籍:轻松扩容与缩容,释放高性能潜能
    扩展集群操作扩容在我们原始的集群基础上,我们决定增加一台主节点(8007)和一台从节点(8008),这样新增的节点将会在下图中以虚线框的形式显示在集群中。1:首先,在/usr/local/redis-cluster目录下创建两个文件夹,分别命名为8007和8008。接下来,将8001文件夹下的redis.conf......
  • elementui组件封装(el-menu)
    废话不多说直接上代码:递归菜单项:<template><el-submenuv-if="menuData.children&&menuData.children.length>0":index="menuData.menuId"><templateslot="title"><iclass="el-icon-location......
  • 大型网站架构技术
    大型网站架构技术大型网站特点用户多,分布广泛大流量、高并发易受攻击功能多、变更频繁海量数据从小到大、逐渐发展架构目标高性能:提供快速访问体验高可用:网站服务一直正常访问可伸缩:通过硬件增加/减少,提高/降低处理能力可扩展:系统间耦合低,方便通过新增/移除方式,增加......
  • MongoDB一
    MongoDB的引言MongoDB是一个基于分布式文件存储的数据库。由C++语言编写。旨在为WEB应用提供可扩展的高性能数据存储解决方案。Nosql技术门类redis内存型mongodb文档型MongoDB是一个介于关系数据库和非关系数据库之间的产品,是非关系数据库当中功能最丰富,最像关系数据库的。他......
  • 23-Vue组件化编程-非单文件组件和单文件组件
    非单文件组件一个文件中包含有n个组件 Vue中使用组件的三大步骤1.定义组件(也就是创建组件)2.注册组件(这里有局部注册和全局注册)3.使用组件(编写组件标签) 注册组件(局部注册)靠newVue的时候传入components选项<!DOCTYPEhtml><htmllang="en"><head><meta......