随着MongoDB在国内的推广，越来越多的开发人员开始使用MongoDB，但是由于缺乏培训和指导，很多人不清楚MongoDB在建模、复制集以及分片等方面的使用原则和技巧。在实际工作中踩到了很多的坑。

开头还是介绍一下群，如果感兴趣PolarDB,MongoDB,MySQL,PostgreSQL,Redis,Oceanbase,SqlServer等有问题，有需求都可以加群。加群请联系liuaustin3，（共1730人左右1+2+3+4+5）4群（240+）,另欢迎OpenGaussGaussDB的技术人员加入。Mongoshake是阿里云自研的开源工具，实现Mongodb数据库之间的数据同步，

mysql主从复制-详解请查看：mysql主从复制集群、缓存、分离1主从配置原理2操作步骤2.1准备两台装好mysql的服务器（我在此用docker模拟了两台机器）2.2远程连接入主库和从库2.3测试主从同步

1.基本原理：基本构成是1主2从的结构，自带互相监控投票机制（Raft（MongoDB）Paxos（mysqlMGR用的是变种））如果发生主库宕机，复制集内部会进行投票选举，选择一个新的主库替代原有主库对外提供服务

一、部署原理使用statefulset控制器部署mysql主从集群的原理如下图所示：官方地址：RunaReplicatedStateful参考博客：CSDN博客阿里云博客二、使用statefulset控制器部署mysql主从集群2.1、首先从资源清单创建ConfigMap[root@master-devmysql_cluster]#catmysql-configmap.yamlapiVersion

复制集数据同步使用复制集的过程中，当主节点有数据变更的时候，备份节点都会进行数据同步操作，需要注意的是，在Mongo的复制集中，备份节点进行数据同步是依赖主节点的oplog，oplog数据存放在主节点local

MMM与MHA以及MGR，高可用架构都有如下的共同点：对主从复制集群中的Master节点进行监控自动的对Master进行迁移，通过VIP。

1.定义由于数据量过大，单个master复制集难以承担，因需要对多个复制集进行集群，形成水平扩展，每个复制集只负责存储整个数据集的一部分，这就是redis的集群，其作用是提供在多个redis节点间共享数据的程序集

1概述搭建mongodb一主两从，通过复制集的模式，进行高可用数据容灾。

：1、导出导入dump&restore2、修复数据库repairdatabase3、复制数据库db.copyDatabase(“from”,”to”,”127.0.0.1:27017”);4、重新同步复制集方法一

MongoDB存储引擎1、默认WiredTiger2、WhyWiredTiger3、checkpoint4、Disk空间回收5、db.serverStatus()和db.stats()四、MongoDB复制集

docker-compose搭建的Mysql主从复制设置前注意下面几点：1）要保证同步服务期间之间的网络联通。即能相互ping通，能使用对方授权信息连接到对方数据库（防火墙开放3306端口）。2）关闭selinux。3）同步前，双方数据库中需要同步的数据要保持一致。这样，同步环境实现后，再次更新的数据就会如期同步了。如果主库是新库，忽略此步。创建目录mkdir-p/usr/local/docker

一、PostgreSQL共享库加载repmgr若想要实现高可用集群的自动故障转移，就必须使用repmgrd的守护程序，用来监控和记录复制集群信息、检测集群复制故障并决策选出最佳服务器并提升为主服务器，启动

1简介repmgrd("replicationmanagerdaemon")是一个管理和监视守护进程，运行在复制集群中的每个节点上。

目录项目名称项目环境项目描述项目步骤1.规划设计整个集群的网络拓扑结构，按照规划为每台服务器配好IP2.在中控机上部署ansible服务，通过SSH与MySQL集群建立免密通道，编写playbook在4台主从复制集群服务器上二进制安装

一、项目描述项目名称：使用zabbix监控的高可用mysql主从复制集群项目环境：系统版本IP主机名角色CentOS7.9.2009192.168.8.128mysql-master主服务器CentOS7.9.2009192.168.8.131mysql-slave

MongoDB的事务支持主要针对复制集(v4.0及更高版本)和分片集群(v4.

ClusterControl简介ClusterControl是一个用于部署数据库集群的无代理管理和自动化软件，它能够直接从用户界面部署，监控，管理和扩展数据库服务器/集群。ClusterControl能够处理维护数据库服务器或集群所需的大多数管理任务。ClusterControl由许多组件组成：ComponentPackagenamingRoleClusterControlController(c

linuxMySQL主从–GTID主从4.GTID主从4.1GTID概念介绍GTID即全局事务ID(globaltransactionidentifier),其保证为每一个在主上提交的事务在复制集群中可以生成一个唯一的

mysql主从–GTIDGTID概念介绍GTID即全局事务ID(globaltransactionidentifier),其保证为每一个在主上提交的事务在复制集群中可以生成一个唯一的ID。

重要参数的持久化开启GTID的必备条件GTID工作原理GTID主从配置GTID概念介绍GTID即全局事务ID(globaltransactionidentifier),其保证为每一个在主上提交的事务在复制集群中可以生成一个唯一的

Replication用两个或以上的实例搭建了MySQL主从复制集群，提供单点写入，多点读取的服务，实现了读的scaleout。上面的栗子，一个主库(M)，三个从库(S)，

火山日常啰嗦上一篇说了mongodb单机版的安装，现在就来记录mongodb复制集replication的安装过程了。replication的安装方式有两种：1、复制集安装在同一个节点--垂直安装。

Redis：远程字典服务它是一个key-value的存储系统高性能、非关系型数据库它与其他数据库比较具备持久化、支持高并发、具有丰富的数据类型的特点利用linux3搭建rediscluster集群，使用端口7001-7003模拟从节点，7004-7006模拟主节点实验环境RockyLinux9.0本地yum配置一台服务器多端口的主从集群端口主从对应主节点7001从70047002从70057003

1GTID概念介绍GTID即全局事务ID(globaltransactionidentifier),其保证为每一个在主上提交的事务在复制集群中可以生成一个唯一的ID。

文章目录GTID概念GTID工作原理GTID主从配置GTID概念GTID即全局事务ID(globaltransactionidentifier),其保证为每一个在主上提交的事务在复制集群中可以生成一个唯一的

一个复制集能承载的容量和负载是有限的，遇到以下场景就需要考虑使用分片存储容量需求超出单机的磁盘容量。活跃的数据集超出单机内存容量，导致很多请求都要从磁盘读取数据，影响性能。

环境说明[root@MongoDB~]#cat/etc/redhat-releaseCentOSrelease6.9(Final)[root@MongoDB~]#uname-r2.6.32-696.el6.x86_64[root@MongoDB~]#/etc/init.d/iptablesstatusiptables:Firewallisnotrunning.[root@MongoDB~]#get

MongoDB复制集架构高可用在生产环境中，不建议使用单机版的MongoDB服务器。

Redis三、搭建Redis一主两从集群3.1、准备配置文件3.1.1、准备主节点6379配置文件3.1.2、准备从节点6380配置文件3.1.3、准备从节点6381配置文件3.2、启动Redis主从复制集群

mysql的整体体系结构如下:image.pngClientConnectors接入方支持协议很多ManagementServeices&Utilities系统管理和控制工具，mysqldump、mysql复制集群

数据库开发系列文章目录数据库开发系列前言一、MongoDB存储引擎二、MongoDB复制（副本集）三、为什么需要分片集群架构四、高可用分片集群架构（+复制集）总结前言数据库的演进随着计算机的发展，越来越多的数据需要被处理

单个master-slave模式难以承担，当出现master节点故障的一瞬间，哨兵重新选举新的master节点之前，这一小段时间将会导致Redis服务不可用，因此需要对多个master-slave主从复制集进行集群

阿里云服务器使用Docker搭建MongoDB副本集（复制集）一、Docker安装官方文档：https://docs.docker.com/engine/install/centos/1、安装yum-utilssudoyuminstall-yyum-utils2

搭建主从复制集群的目的：从库可用于容灾备份从库可以分摊读流量提高服务可用性开启主从复制，你需要关心的配置项有：#主库的IP和端口replicaof#连接主库认证的用户名和密码masterusermasterauthreplica-read-on

(表面理解)五、缓存的分类六、本地缓存之Caffeine的使用缓存填充策略过期策略手动删除事件监听一、什么是缓存在java中，缓存是在计算机上的一个原始数据的复制集。通俗的说就是数据的一个备份。

Spring实战系列文章：Spring实战|SpringAOP核心秘笈之葵花宝典Spring实战|SpringIOC不能说的秘密？国庆中秋特辑系列文章：国庆中秋特辑（八）SpringBoot项目如何使用JPA国庆中秋特辑（七）Java软件工程师常见20道编程面试题国庆中秋特辑（六）大学生常见30道宝藏编程面试题国庆中秋特辑（五）MySQL如何性能调优？下篇国庆中秋特辑（四）MySQL如何性能调优？

Mongodb的不足之处在集群分片中的数据分布不均匀单机可靠性比较差大数据量持续插入，写入性能有较大波动磁盘空间占用比较大（2）Mongodb的过人之处无模式查询与索引方式灵活，是最像SQL的Nosql支持复制集

本篇文章是学习课程中的一部分课后笔记一、缓存原理&设计1.什么是缓存缓存原指CPU上的一种高速存储器，它先于内存与CPU交换数据，速度很快现在泛指存储在计算机上的原始数据的复制集，便于快速访问。

1、介绍主从复制（Master/Slaver）可以算得上是最简单的一种集群搭建方式啦实际上，它只是使用一个或多个从节点同步主节点的数据而已，整体结构并不复杂，搭建起来也比较简单主从复制集群的

1、介绍之前讲到，主从复制集群利用从节点对主节点的数据进行备份，在主节点发生故障后可以手动恢复数据但是这里有一个问题，那就是每次当主节点发生故障后，都需要暂停服务并且手动转移数据不仅十分麻烦，

7.1规划注意:IP地址10个实例：38017-38026（1）configserver:38018-380203台构成的复制集（1主两从，不支持arbiter）38018-38020（复制集名字configsvr

文章目录第一章：MongoDB逻辑结构第二章：MongoDB安装部署以下是复制集与分片集群有关第三章mongodb常用基本操作mongodb对象操作第一章：MongoDB逻辑结构NoSQL文档(json

复制集群搭建基本介绍什么是复制集？复制集是由一组拥有相同数据集的MongoDB实例做组成的集群。

一、简介NoSQL数据库四大家族：列存储Hbase，键值(Key-Value)存储Redis，图像存储Neo4j，基于分布式文档存储的数据库MongoDb。MongoDB和关系型数据库对比关系型数据库MongoDBdatabase（库）database（库）table（表）collection（表）row（行）document（BSON文档）column（列）field（字段）index（索引）i

>UMongo（前身是JMongoBrowser)是一个图形化界面的工具，用来浏览和管理MongoDB集群，支持Linux,Windows和MacOSX.UMongo特性有：1.支持连接到单个服务器、复制集以及

MySQL主从复制-基于GTID复制的优缺点一、概念及原理什么事GTID从MySQL5.6开始支持的复制方式GTID即全局事务ID，其保证为每个在主上提交的事务在复制集群中可以生成一个唯一的IDGTID

移动计算比移动数据便宜”跨异构硬件和软件平台的可移植性NameNode和DataNodes文件系统命名空间数据副本第一步：副本的放置副本的选择安全模式文件系统元数据的持久化通讯协议可靠性数据磁盘故障，心跳和复制集群的再平衡数据的完整性元数据磁盘的故障快照数据组织数据块复制管道辅助功能

文章目录前置条件下载nacos上传nacos安装包到服务器上持久化数据库配置修改集群配置配置优化点复制集群节点启动集群服务配置nginx负载均衡访问nacos页面存在的坑点官方解释改动引起的变化说明另一个问题代码中

5.3构建主从关系6.redis集群读写7.redis集群主从切换8.redis集群扩容9.redis集群缩容10.集群常用操作命令和CRC16算法分析集群1.基本介绍由于数据量过大，单个Master复制集难以承担