• 主从数据一致性


    主从同步的要求:

    • 读库和写库的数据一致(最终一致)
    • 写数据必须写到写库

    主从延迟问题

    进行主从同步的内容是二进制日志,它是一个文件,在进行 网络传输 的过程中就一定会 存在主从延迟(比如 500ms),这样就可能造成用户在从库上读取的数据不是最新的数据,也就是主从同步中的 数据不一致性 问题。

    主备延迟最直接的表现是,从库消费中继日志(relay log)的速度,比主库生产binlog的速度要慢。

    如何减少主从延迟

    1. 降低多线程大事务并发的概率,优化业务逻辑
    2. 优化SQL,避免慢SQL, 减少批量操作 ,建议写脚本以update-sleep这样的形式完成。
    3. 提高从库机器的配置 ,减少主库写binlog和从库读binlog的效率差。
    4. 尽量采用 短的链路 ,也就是主库和从库服务器的距离尽量要短,提升端口带宽,减少binlog传输的网络延时。
    5. 实时性要求的业务读强制走主库,从库只做灾备,备份。

    如何解决一致性问题

    方法 1:异步复制

    在这里插入图片描述

    也可能从库没有更新,主库提交后客户查询从库,导致主从数据不一致

    方法 2:半同步复制

    在这里插入图片描述

    并发差,如果有多个从库,要等所有从库都发送ack才能保证数据强一致性,如果只有一部分发送ack,主库就返回客户端,还有有可能造成主从数据不一致。

    方法 3:组复制

    首先我们将多个节点共同组成一个复制组,在 执行读写(RW)事务 的时候,需要通过一致性协议层(Consensus 层)的同意,也就是读写事务想要进行提交,必须要经过组里“大多数人”(对应 Node 节点)的同意,大多数指的是同意的节点数量需要大于(N/2+1),这样才可以进行提交,而不是原发起方一个说了算。而针对 只读(RO)事务 则不需要经过组内同意,直接 COMMIT 即可。在一个复制组内有多个节点组成,它们各自维护了自己的数据副本,并且在一致性协议层实现了原子消息和全局有序消息,从而保证组内数据的一致性。
    在这里插入图片描述

  • 相关阅读:
    OpenCL总结
    samba实现
    显示本地 IP 地址和相应的 QR 码,方便用户共享和访问网络信息
    2、鸿蒙开发工具首次运行时开发环境配置
    Kafka - 07 Zookeeper中存储的 Kafka 信息
    《代码大全2》第6章 可以工作的类
    springboot的商品设计热销排行实现
    IDEA的启动速度优化
    SMB 协议详解之-NTLM身份认证
    微服务架构演进
  • 原文地址:https://blog.csdn.net/pmc0_0/article/details/126580084