前言

一键获取MySQL核心数据结构、底层实现原理、索引、事务、锁机制、MySQL性能优化案例、美团MySQL中间件等。

一、什么是MySQL复制

1、什么是复制

MySQL的复制是构建大规模、高性能应用程序的基础,称为“水平扩展”架构。生产环境通常为服务器配置一个或多个备用数据库以同步数据。

复制是将一台服务器(即MySQL数据库)的数据与其他服务器同步。

一个主数据库的数据可以同步到多个备用数据库,备用数据库本身也可以配置为另一个服务器的主数据库。主数据库和备用数据库之间有许多不同的组合。

可以通过复制将读取操作指向备用数据库,以获得更好的读取扩展。

但是,对于写操作,复制不适合扩展写操作。在一个主数据库和多个从数据库的架构中,写入操作将被多次执行。此时,整个系统的性能取决于写入操作的最慢部分。

2、MySQL数据库的复制方式
MySQL支持两种复制方法:基于行的复制和基于语句的复制。

基于语句的复制(也称为逻辑复制)自 MySQL 3.23 以来就已经存在,基于行的复制是在 MySQL 5.1 中增加的新特性

两种方法都通过在主数据库上记录二进制日志并在备用数据库上同步写日志来实现异步数据复制

这意味着备用数据库上的数据可能在同一时间点与主数据库不一致,主数据库和备用数据库之间的延迟无法保证。一些大型语句可能会导致备用数据库延迟几秒钟、几分钟甚至几小时。

3、复制可以解决的问题
3.1、数据分布
MySQL 引入的基于行的复制后,比传统的基于语句的复制模式带来更大的带宽压力。这种情况对于复制操作可以随时停止或开始,并在不同的地理位置(如两地三中心)分发数据备份。

3.2、负载均衡
MySQL复制可以将读取操作分发到多个服务器,以优化读取密集型应用程序。实施方便,可以通过简单的代码修改来实现负载平衡。

3.3、备份
对于备份,复制是一项重要的技术补充(但是不能代替redo log、bin log等)。

3.4、高可用性和故障切换
复制可以帮助应用程序避免MySQL单点故障(例如两地三中心:生产中心、同城容灾中心、异地容灾中心),故障切换系统可以显著减少停机时间。

3.5、MySQL版本切换
使用更高版本的MySQL作为备用数据库,以确保在升级所有实例之前可以在备用数据库中按预期执行查询,最后逐步切换主库。

这里面一般使用的方法分为4步,1、首先主备都使用低版本库,2、切换备库的时候,双写主备库,查还是低版本,3、切换备库的时候,双写主备库,查使用高版本备库,4、完全使用没问题的主备高版本库。

二、MySQL 复制的配置实战

MySQL复制实现非常简单。基本步骤如下:

1、创建复制所需的帐户和权限;

在 main(MASTER )数据库中创建一个用户,并给予其适当的权限。备用数据库I/O线程使用此用户名连接到主数据库,并读取其二进制日志。

GRANT REPLICATION SLAVE, REPLICATION CLIENT ON *.* TO repl@192.168.0.% IDENTIFIED BY 'password',;

2、要从主库 main 复制数据副本,可以使用逻辑备份工具mysqldump、mysqlpump或物理备份工具克隆插件;(配置主库和备库一般是DBA的工作)

3、使用命令 CHANGE MASTER TO 建立复制关系(启动复制)

4、使用命令 SHOW SLAVE STATUS 观察复制状态(当执行完 CHANGE MASTER TO ,需要通过 SHOW SLAVE STATUS 检查复制是否正确)

三、如何避免单点数据库服务器失效

MySQL 复制一般分为以下几种类型:异步复制、半同步复制、多源复制、延迟复制。

本文简单介绍几种复制方式,不会深入到 MTBF/(MTBF+MTTR),平均故障间隔、平均修复时间以及MMM 集群架构、MHA 集群架构等等产线实际应用的架构,也不会深入复制的原理,本文主要是带读者建立完整的MySQL 复制的知识体系,后续会通过单独的文章讲解:

MySQL 复制工作原理(待补充)、MySQL 高可用架构与企业级实战(待补充)。

1、异步复制(async replication)

在异步复制中,主库 main 不关心从库 secondary 是否接收二进制日志,因此主库 main不依赖从库 secondary 。您可以认为 main 和 secondary 是两个独立工作的服务器,数据最终将通过二进制日志保持一致。

异步复制性能最好,因为对数据库本身几乎没有开销,除非主从延迟非常大,并且转储线程需要读取大量二进制日志文件。

如果企业对数据一致性的要求较低,则可以在发生故障时容忍数据丢失。推荐异步复制,它具有最好的性能(例如微博业务,虽然它对性能要求很高,但通常可以容忍数据丢失)。而核心交易业务系统通常最关心数据安全,如监控业务和报警系统。

2、半同步复制(semi-synchronous replication)

半同步复制分为有损和无损,有损半同步一般没有使用场景。半同步复制要求在主事务提交过程中至少有 N 个从库 secondary 接收二进制日志,这样当主库 main 停机时,至少有 N 台从库 secondary 中的数据是完整的。

无损半同步复制 WAIT ACK 发生在事务提交之前。即使从库 secondary 没有收到二进制日志,主库 main 也已关闭,由于异常尚未提交,因此数据本身对外界不可见,也不存在丢失的问题。

因此,对于任何有数据一致性要求的业务,如核心订单业务、银行、保险、证券等与资金密切相关的业务,必须使用无损半同步复制。通过这种方式,数据是安全和有保障的,并且即使发生故障,从库 secondary 也拥有完整的数据副本。

3、多源复制(multisource replication)

异步复制与半同步复制都是一个主库 main 都对应于 N 个从库 secondary 。MySQL还支持N个主机对应1个从库。这种架构称为多源复制。

多源复制允许将不同MySQL实例上的数据同步到一个MySQL实例,便于在一个从库 secondary 上进行一些统计查询,例如常见的OLAP业务查询。

4、延迟复制(delayed replication)

延迟复制允许从库 secondary 延迟接收的二进制日志,为了避免主服务器上的错误操作,它会立即同步到从库 secondary ,导致数据完全丢失。

-- 设置了 Slave 落后 Master 服务器3小时
CHANGE MASTER TO master_delay = 10800

例如,您可以设置延迟一天的待机机器,如果出现在线错误操作,如DROP TABLE和DROP DATABASE,用户可以获得一天的快照,快速恢复数据。

对于金融行业来说,延迟复制是备份设计中必须考虑的一个体系结构部分(博主就是使用多源复制+延迟复制+无损半同步复制的)。

总结

本文简单介绍几种复制方式复制在生产中解决的实际问题,MySQL复制的配置流程和MySQL复制类型,不会深入到 MTBF、MTTR平均故障间隔、平均修复时间等等以及MMM 集群架构、MHA 集群架构等等产线实际应用的架构,也不会深入复制的原理,本文主要是带读者建立完整的MySQL 复制的知识体系,后续会通过单独的文章讲解:

MySQL 复制工作原理(待补充)、MySQL 高可用架构与企业级实战(待补充)。

MySQL复制与高可用水平扩展架构实战相关推荐

  1. 【MySQL】MySQL复制与高可用水平扩展架构实战(MySQL专栏启动)

  2. 基于MySQL的高可用可扩展架构探讨

    随着信息量飞涨,信息的存储成为了这个时代至关重要的一项技术.如何来保证数据存储技术能够适应信息量的增长速度和我们对信息的高度依赖,成为一个非常重要的课题.本文将从数据库架构的层面,通过以开源的数据存储 ...

  3. 构建在线教育弹性高可用视频处理架构实战

    简介: 对于负责建设视频处理系统的技术团队而言,这样的业务场景就留给了他们一系列的挑战. 前言 近些年,在线教育行业飞速发展,为整个社会的知识传播提供了前所未有的便利性.通过多种形式的在线教育平台,学 ...

  4. mysql性能优化和高可用架构实践pdf_实践大于一切!Alibaba最新MySQL性能优化+高可用架构全彩版PDF...

    本篇的内容将会覆盖MySQL 5. 7数据库体系结构.InnoDB存储引擎.MySQL事务和锁.性能优化.服务器全面优化.性能监控.主从复制,以及PXC集群.MHA自动故障转移群集.MGR组复制.Ke ...

  5. dtc mysql_DTCC归来-高可用可扩展数据库架构探讨

    之前说起 将参加 2010 数据库技术大会,今天将这次参会使用的 PPT 贴出来,或许会对大家有点用. 先大概介绍下大会的几本情况吧,满满2天的大会,共安排了 29 场演讲,内容涵盖了 Oracle, ...

  6. 01 MySQL生产环境高可用架构浅谈

    1.数据库主从架构与分库分表 ​ 随着现在互联网的应用越来越大,数据库会频繁的成为整个应用的性能瓶颈.而我们经常使用的MySQL数据库,也会不断面临数据量太大.数据访问太频繁.数据读写速度太快等一系列 ...

  7. MySQL集群高可用架构

    MySQL集群高可用架构 前言 高可用架构对于互联网服务基本是标配,无论是应用服务还是数据库服务都需要做到高可用.对于一个系统而言,可能包含很多模块,比如前端应用,缓存,数据库,搜索,消息队列等,每个 ...

  8. MySQL常见的高可用架构

    MySQL常见的高可用架构 概述: 1.基于共享存储的方案SAN 优点: 限制或缺点: 2.基于磁盘复制的方案 MySQL+DRDB架构 优点: 限制或缺点: 3.MySQL+MHA架构 优点: 缺点 ...

  9. MYSQL高可用集群架构——MHA架构

    MHA高可用集群 文章目录 一.MHA 简介: 二.部署 MHA: 第一步:三台主从服务器安装 mysql 第二步:修改 mysql 的主配置文件:/etc/my.cnf ,注意三台服务器的 serv ...

最新文章

  1. linux系统下搜索文件是否存在的五种方法
  2. 企业网络推广专员浅析是否网站权重越高企业网络推广效果越好?
  3. nginx html 替换,Nginx 服务内容替换功能(sub模块)
  4. Intellij IDEA中Mybatis Mapper自动注入警告的6种解决方案
  5. 解决行内块元素(inline-block)之间的空格或空白问题
  6. 模仿qq空间或朋友圈发布动态、评论动态、回复评论、删除动态或评论的功能(下)(核心部分)...
  7. 蚂蚁笔记 linux安装教程,简年14:蚂蚁笔记(Leanote)快速部署指南
  8. phpword生成图表
  9. beanshell断言_Jmeter之BeanShell断言使用(示例代码)
  10. 【Windows编程】Windows Socket API介绍
  11. varnish---vcl语法
  12. 为什么计算机三分技术七分管理,如何理解“七分管理,三分技术,运作贯穿始终”?...
  13. Android耳机耳机,Android 耳机插拔流程源码跟踪浅析
  14. 可以进行论文降重吗?
  15. 强化学习(1)-什么是强化学习
  16. 【Windows编程】windows窗口创建过程详解
  17. Smart Link Monitor Link
  18. 程序员与爱情不仅只是擦肩而过
  19. 创客学院9天C语言三
  20. [渝粤教育] 泉州师范学院 闽南与海丝文化 参考 资料

热门文章

  1. Capture One快捷键
  2. 论文阅读笔记之——《FishNet: A Versatile Backbone for Image, Region, and Pixel Level Prediction》
  3. 79.输入子系统(上)
  4. 【入门部署】Steam VR 环境部署与基本程序实现说明
  5. 华为30 岁以下员工占比 28%;SpaceX:欢迎“攻击”星链;高德地图宣布正式上线“红绿灯倒计时”功能 | EA周报...
  6. 扦插技术图解_手把手教你扦插月季花,方法简单,一个月生根,成活率九十以上...
  7. JSP转换Servlet
  8. 数据库中北大学第二章ppt总结和课后习题详解(小宇特详解)
  9. P3353 在你窗外闪耀的星星————树状数组,前缀和
  10. Python报错:python.h 没有那个文件或目录