当前位置: 首页 >  互联网技术 >  轻松掌握组件启动之MongoDB(上):高可用复制集架构环境搭建

轻松掌握组件启动之MongoDB(上):高可用复制集架构环境搭建

导读:MongoDB复制集.复制集架构.在生产环境中,强烈不建议使用单机版的MongoDB服务器。原因如下:.单机版的MongoDB无法保证系统的可靠性。一旦进程发生故障或是服务器宕机,业务将直接不可用。此外,一旦服务器上的磁盘损坏,数据会直接丢失,而此时并没有任何副本可用。.为了确保

MongoDB复制集

复制集架构

在生产环境中,强烈不建议使用单机版的MongoDB服务器。原因如下:

单机版的MongoDB无法保证系统的可靠性。一旦进程发生故障或是服务器宕机,业务将直接不可用。此外,一旦服务器上的磁盘损坏,数据会直接丢失,而此时并没有任何副本可用。

为了确保数据的高可用性和冗余性,我们建议使用Mongodb复制集(Replication Set)。复制集由一组Mongod实例(进程)组成,其中包含一个Primary节点和多个Secondary节点。所有的数据写入操作都会被写入Primary节点,并且Secondary节点会从Primary节点同步写入的数据,以保持复制集内所有成员存储相同的数据集。这样可以提供数据的高可用性。复制集的功能依赖于两个方面:

  1. 数据写入时将数据迅速复制到另一个独立节点上,确保数据的冗余性和可用性。
  2. 在接受写入的节点发生故障时,系统能够自动选举出一个新的替代节点,以确保系统的连续性和可用性。

在实现高可用性的同时,Mongodb复制集还具有其他几个附加作用:

数据分发:复制集可以将数据从一个区域复制到另一个区域,从而减少另一个区域的读取延迟。

读写分离:复制集还支持读写分离的功能。通过将不同类型的压力分别在不同的节点上执行,可以有效地分担系统的负载。

异地容灾:复制集还可以实现异地容灾。在数据中心发生故障时,可以快速切换到异地部署的节点。

早期版本的MongoDB使用了一种Master-Slave的架构,该做法在MongoDB 3.4版本之后已经废弃。因为Master-Slave 其中Master 宕机后不能自动恢复,只能靠人为操作,可靠性也差,操作不当就存在丢数据的风险。

三节点复制集模式

常见的复制集架构通常由3个成员节点组成,其中存在几种不同的模式,具体取决于配置和需求。

PSS模式(官方推荐模式)

在常见的复制集架构中,PSS(Primary+Secondary+Secondary)模式是一种常见的配置,它由一个主节点和两个备节点组成。

在这种模式下,如果主节点不可用,复制集会智能地选择其中一个备节点作为新的主节点,并继续正常的操作。这种自动切换的机制确保了系统的连续性和可用性,同时减少了数据丢失的风险。旧的主节点在可用时重新加入复制集。

PSA模式

PSA(Primary+Secondary+Arbiter)模式是一种常见的架构配置。它由一个主节点、一个备节点和一个仲裁者节点组成。

在这种PSA模式下,Arbiter节点的主要作用是作为一个仲裁者来参与选举投票。它不存储数据副本,也不提供实际的业务读写操作。因此,即使Arbiter节点发生故障,也不会对业务产生直接影响,只会影响选举投票过程。主节点负责处理所有的业务读写操作,并且有一个完整的数据副本。备节点也存储了一个完整的数据副本,并在主节点故障时承担主节点的角色。而Arbiter节点则参与选举投票,帮助复制集在主节点发生故障时选择一个新的主节点。

典型三节点复制集环境搭建

即使只有一台服务器,以单节点模式启动复制集也是一个值得考虑的选择。

  • 单机多实例启动复制集
  • 单节点启动复制集

复制集注意事项

关于硬件:

  • 由于正常的复制集节点都有可能成为主节点,它们的地位是相等的。因此,为了确保系统的稳定性,必须确保各节点的硬件配置保持一致。
  • 为了避免多个节点同时宕机,每个节点使用的硬件必须具有独立性。这样可以保证即使一个节点宕机,其他节点仍然可以正常工作,确保系统的连续性和可靠性。

关于软件:

  • 在复制集中,每个节点的软件版本必须保持一致,这样可以避免出现无法预料的问题。
  • 值得注意的是,增加节点并不会提高系统的写入性能。

环境准备:

  • 安装 MongoDB并正确配置好环境变量
  • 确保你的计算机硬盘上有充足的空间,至少需要10GB或更多的可用空间。

准备配置文件

为了实现复制集的最佳性能和可靠性,建议将复制集的每个mongod进程部署在不同的服务器上。目前我们在一台机器上运行3个进程,因此需要对它们进行以下配置:

  • 配置不同的端口:(28017/28018/28019)

  • 配置不同的数据目录:

    mkdir ‐p /data/db1 mkdir ‐p /data/db2 mkdir ‐p /data/db3

  • 配置不同的日志文件路径:(例如:/data/db1/mongod.log)

创建配置文件 /data/db1/mongod.conf 时,你可以进行以下设置:

# /data/db1/mongod.conf
systemLog:
  destination: file
  path: /data/db1/mongod.log
  logAppend: true
storage:
  dbPath: /data/db1
net:
  bindIp: 0.0.0.0
  port: 28017
replication:
  replSetName: rs0
processManagement:
  fork: true

我们可以按照以上步骤修改端口和路径,分别配置 db2 和 db3。请确保配置文件使用 YAML 格式。

启动 MongoDB 进程

mongod ‐f /data/db1/mongod.conf
mongod ‐f /data/db2/mongod.conf
mongod ‐f /data/db3/mongod.conf

注意:如果启用了 SELinux,可能阻止上述进程启动。简单起见请关闭 SELinux。

# 永久关闭,将SELINUX=enforcing改为SELINUX=disabled,设置后需要重启才能生效
vim /etc/selinux/config
# 查看SELINUX
/usr/sbin/sestatus ‐v

总结

在本文中,我们介绍了MongoDB复制集的架构和特点。我们强调了在生产环境中使用单机版MongoDB的风险,并推荐使用复制集来保证数据的高可用性和冗余性。

复制集由一组Mongod实例组成,其中包含一个Primary节点和多个Secondary节点。所有的数据写入操作都会被写入Primary节点,并且Secondary节点会从Primary节点同步写入的数据,以保持复制集内所有成员存储相同的数据集。

最后,我们提供了在典型三节点复制集环境中搭建的步骤和注意事项,包括准备配置文件和启动MongoDB进程。下一章节我们将讲解如何配置复制集和集群安全验证及其连接方式。

内容
  • unity 实现自定义class深度拷贝 deep copy 深度复制 引用类型复制
    unity 实现自定义class
    2023-12-09
    气死我了,搜半天没有,全让序列化再反序列化,又不方便又不美观。结果自己试着一写就通,两行完事。.首先先安装Newtons
  • Unity_Photon
    Unity_Photon
    2023-12-07
    Photon.1.0 Photon搭建.(2条消息) 【Unity3D】Photon环境搭建_photon框架_litt
  • 「微服务」这10道Consul面试题值得一看
    「微服务」这10道Consul面
    2023-12-06
    前言.Consul 是一种非常强大的分布式服务发现和配置管理工具 ,它可以帮助开发人员和运维人员更好地管理和维护分布式系
  • OnionArch - 采用DDD+CQRS+.Net 7.0实现的洋葱架构
    OnionArch - 采用DD
    2023-12-04
    博主最近失业在家,找工作之余,看了一些关于洋葱(整洁)架构的资料和项目,有感而发,自己动手写了个洋葱架构解决方案,起名叫
  • Cola4.0 - DDD 设计思想
    Cola4.0 - DDD 设计
    2023-12-04
    cola前言.COLA提供了一整套代码架构,拿来即用。 其中包含了很多架构设计思想,包括讨论度很高的领域驱动设计DDD等
  • 手把手教你落地DDD
    手把手教你落地DDD
    2023-12-03
    一、前言 常见的DDD实现架构有很多种,如经典四层架构、六边形(适配器端口)架构、整洁架构(Clean.Architec
  • 微服务面试必读:拆分、事务、设计的综合解析与实践指南
    微服务面试必读:拆分、事务、设计
    2023-12-03
    谈谈你对微服务的理解,微服务有哪些优缺点?.首先,微服务是对传统单体架构的一种优化。当一个单体架构随着业务的增加而变得臃
  • DDD架构为什么应该首选六边形架构?
    DDD架构为什么应该首选六边形架
    2023-12-03
    一、传统分层架构.分层架构的一个重要原则是:每层只能与位于其下方的层发生耦合。.分层架构分两种:一种是严格分层架构,规定
  • 使用telnet来调试游戏
    使用telnet来调试游戏
    2023-12-02
    telnet是什么.Telnet协议是TCP/IP协议族中的一员,是Internet远程登陆服务的标准协议和主要方式。它
  • 【实践篇】手把手教你落地DDD
    【实践篇】手把手教你落地DDD
    2023-12-02
    1. 前言.常见的DDD实现架构有很多种,如经典四层架构、六边形(适配器端口)架构、整洁架构(Clean.Archite
  • 翻译:REST 和 gRPC 详细比较
    翻译:REST 和 gRPC 详
    2023-12-02
    译者注:在微服务架构设计,构建API和服务间通信技术选型时,对 REST 和 gRPC 的理解和应用还存在知识盲区,近期
  • 【实践篇】领域驱动设计:DDD工程参考架构
    【实践篇】领域驱动设计:DDD工
    2023-12-01
    背景.为什么要制定参考工程架构.不同团队落地DDD所采取的应用架构风格可能不同,并没有统一的、标准的DDD工程架构。有些
  • ET8开发微信小游戏之部署云服务器Nginx代理
    ET8开发微信小游戏之部署云服务
    2023-12-01
    最近用ET8搞微信小游戏测试,部署到云服务器,手机上运行,必须要用https备案过得域名,客户端使用websocket创
  • 如何用 30s 给面试官讲清楚什么是 Session-Cookie 认证
    如何用 30s 给面试官讲清楚什
    2023-12-01
    引言.由于 HTTP.协议是无状态的,完成操作关闭浏览器后,客户端和服务端的连接就断开了,所以我们必须要有一种机制来保证
  • 如何用 30s 给面试官讲清楚什么是 Token?
    如何用 30s 给面试官讲清楚什
    2023-12-01
    引言.前文介绍了 Session-Cookie 的认证过程,简单回顾下基本步骤:.客户端(浏览器)向服务器发送用户名和密
  • 一文揭秘DDD到底解决了什么问题
    一文揭秘DDD到底解决了什么问题
    2023-12-01
    DDD作为架构设计思想帮助微服务控制规模复杂度,那它是怎么做到的呢?.一、架构设计是为了解决系统复杂度.谈到架构,相信每
  • ***性能优化和调整服务
    ***性能优化和调整服务
    2023-12-31
    ***性能优化和调整服务.***性能优化和调整服务是指针对服务器的硬件和软件进行调整和优化,以提高其运行效率和稳定性的服
  • 科技创新孵化器服务
    科技创新孵化器服务
    2023-12-16
    科技创新孵化器服务.科技创新孵化器是指为初创科技企业提供办公、技术、**和资金服务的机构,而科技创新孵化器服务则是指这些
  • ***迁移与升级解决方案
    ***迁移与升级解决方案
    2024-01-05
    ***迁移与升级解决方案.随着业务的不断扩大和发展,很多企业逐渐意识到原有的***已经不能满足日益增长的需求,因此需要进
  • 虚拟现实技术开发
    虚拟现实技术开发
    2024-01-15
    虚拟现实技术开发.虚拟现实技术已经成为了当今科技行业的热门话题,它的发展日益迅猛,给人们的生活和工作带来了巨大的变革。在
  • 全球电子元件市场趋势分析
    全球电子元件市场趋势分析
    2023-12-31
    全球电子元件市场趋势分析.近年来,全球电子元件市场呈现出不断增长的趋势。随着科技的不断发展和智能设备的普及,电子元件市场
  • 电子元件质量检测与认证服务
    电子元件质量检测与认证服务
    2024-01-05
    电子元件质量检测与认证服务.为什么需要电子元件质量检测与认证服务?.随着电子产业的不断发展,电子元件在各个生产领域都起着
  • ***虚拟化技术咨询服务
    ***虚拟化技术咨询服务
    2023-12-21
    ***虚拟化技术咨询服务.在当今数字化时代,***虚拟化技术越来越受到企业和个人用户的青睐。虚拟化技术通过将物理***划
  • 高性能电子元件**
    高性能电子元件**
    2024-01-10
    高性能电子元件**.随着科技的不断进步,电子行业的发展日新月异。高性能电子元件作为电子产品的关键组成部分,对于产品的性能
  • 定制化电子元件解决方案
    定制化电子元件解决方案
    2024-01-15
    定制化电子元件解决方案.在现代科技发展迅速的时代,电子元件的需求日益增加,同时对于定制化的需求也在不断提升。定制化电子元
  • ***安全加固与防护方案
    ***安全加固与防护方案
    2024-01-10
    ***安全加固与防护方案.随着互联网的快速发展,***安全问题日益凸显。一旦***遭受攻击,可能导致数据泄露、服务中断甚