码农知识堂 - 1000bd
  •   Python
  •   PHP
  •   JS/TS
  •   JAVA
  •   C/C++
  •   C#
  •   GO
  •   Kotlin
  •   Swift
  • 主从数据一致性


    文章目录

    • 主从同步的要求:
    • 主从延迟问题
    • 如何减少主从延迟
    • 如何解决一致性问题
      • 方法 1:异步复制
      • 方法 2:半同步复制
      • 方法 3:组复制

    主从同步的要求:

    • 读库和写库的数据一致(最终一致)
    • 写数据必须写到写库

    主从延迟问题

    进行主从同步的内容是二进制日志,它是一个文件,在进行 网络传输 的过程中就一定会 存在主从延迟(比如 500ms),这样就可能造成用户在从库上读取的数据不是最新的数据,也就是主从同步中的 数据不一致性 问题。

    主备延迟最直接的表现是,从库消费中继日志(relay log)的速度,比主库生产binlog的速度要慢。

    如何减少主从延迟

    1. 降低多线程大事务并发的概率,优化业务逻辑
    2. 优化SQL,避免慢SQL, 减少批量操作 ,建议写脚本以update-sleep这样的形式完成。
    3. 提高从库机器的配置 ,减少主库写binlog和从库读binlog的效率差。
    4. 尽量采用 短的链路 ,也就是主库和从库服务器的距离尽量要短,提升端口带宽,减少binlog传输的网络延时。
    5. 实时性要求的业务读强制走主库,从库只做灾备,备份。

    如何解决一致性问题

    方法 1:异步复制

    在这里插入图片描述

    也可能从库没有更新,主库提交后客户查询从库,导致主从数据不一致

    方法 2:半同步复制

    在这里插入图片描述

    并发差,如果有多个从库,要等所有从库都发送ack才能保证数据强一致性,如果只有一部分发送ack,主库就返回客户端,还有有可能造成主从数据不一致。

    方法 3:组复制

    首先我们将多个节点共同组成一个复制组,在 执行读写(RW)事务 的时候,需要通过一致性协议层(Consensus 层)的同意,也就是读写事务想要进行提交,必须要经过组里“大多数人”(对应 Node 节点)的同意,大多数指的是同意的节点数量需要大于(N/2+1),这样才可以进行提交,而不是原发起方一个说了算。而针对 只读(RO)事务 则不需要经过组内同意,直接 COMMIT 即可。在一个复制组内有多个节点组成,它们各自维护了自己的数据副本,并且在一致性协议层实现了原子消息和全局有序消息,从而保证组内数据的一致性。
    在这里插入图片描述

  • 相关阅读:
    SpringBoot 多点互斥登录(web应用安全) 保姆级教程
    SpringCloud微服务(二)——Eureka服务注册中心
    JUC锁: ReentrantReadWriteLock详解
    MySQL面试题大全(陆续更新)
    51单片机应用从零开始(三)
    redis配置到服务自启动——笔记
    卡尔曼时间序列预测
    在idea中创建spring 微服务(boot)的Gradle项目 讲的很详细的
    How to install MariaDB Database Server on CentOS 8
    输入url,敲回车到页面展示经历了什么?
  • 原文地址:https://blog.csdn.net/pmc0_0/article/details/126580084
  • 最新文章
  • 攻防演习之三天拿下官网站群
    数据安全治理学习——前期安全规划和安全管理体系建设
    企业安全 | 企业内一次钓鱼演练准备过程
    内网渗透测试 | Kerberos协议及其部分攻击手法
    0day的产生 | 不懂代码的"代码审计"
    安装scrcpy-client模块av模块异常,环境问题解决方案
    leetcode hot100【LeetCode 279. 完全平方数】java实现
    OpenWrt下安装Mosquitto
    AnatoMask论文汇总
    【AI日记】24.11.01 LangChain、openai api和github copilot
  • 热门文章
  • 十款代码表白小特效 一个比一个浪漫 赶紧收藏起来吧!!!
    奉劝各位学弟学妹们,该打造你的技术影响力了!
    五年了,我在 CSDN 的两个一百万。
    Java俄罗斯方块,老程序员花了一个周末,连接中学年代!
    面试官都震惊,你这网络基础可以啊!
    你真的会用百度吗?我不信 — 那些不为人知的搜索引擎语法
    心情不好的时候,用 Python 画棵樱花树送给自己吧
    通宵一晚做出来的一款类似CS的第一人称射击游戏Demo!原来做游戏也不是很难,连憨憨学妹都学会了!
    13 万字 C 语言从入门到精通保姆级教程2021 年版
    10行代码集2000张美女图,Python爬虫120例,再上征途
Copyright © 2022 侵权请联系2656653265@qq.com    京ICP备2022015340号-1
正则表达式工具 cron表达式工具 密码生成工具

京公网安备 11010502049817号