码农知识堂 - 1000bd
  •   Python
  •   PHP
  •   JS/TS
  •   JAVA
  •   C/C++
  •   C#
  •   GO
  •   Kotlin
  •   Swift
  • 数据库读写分离和分库分表


    1、读写分离

    读写分离可以将对数据库的读写操作分别作用在不同的数据库节点上,可以小幅提升写的性能,大幅提升读的性能。
    一般情况下,读多写少,会选择一台服务作为主库,多台服务作为从库。

    1.1、读写分离的问题

    主库和从库的数据同步存在延迟,会在延迟的时间段中存在数据不一致问题。主从同步延迟。
    可能的解决办法:

    1. 将写入之后需要立即读取的请求,放到主库处理
    2. 延迟读取

    1.2、实现读写分离

    1.2.1、步骤

    1. 部署多台数据库服务,选择一台作为主库,其它为从库
    2. 保证主库和从库的数据实时同步,即主从复制
    3. 将写的请求交给主库处理,读的请求交给从库处理

    1.2.2、实现方式

    1. 代理方式
      在应用和数据之间使用代理层,将数据请求提交给代理层,由代理曾负责读写的请求转发。
    2. 组件方式
      通过引入第三方组件来实现。如:sharding-jdbc

    1.3、主从复制原理

    在MySQL中,有MySQL binlog二进制日志文件,记录了数据的所有变化,包括执行的DDL和DML语句。可以通过MySQL的二进制日志文件进行主从数据同步。

    1. 主库将数据库中数据的变化写入到 binlog
    2. 从库连接主库
    3. 从库会创建一个 I/O 线程向主库请求更新的 binlog
    4. 主库会创建一个 binlog dump 线程来发送 binlog ,从库中的 I/O 线程负责接收
    5. 从库的 I/O 线程将接收的 binlog 写入到 relay log 中。
    6. 从库的 SQL 线程读取 relay log 同步数据本地(也就是再执行一遍 SQL )。

    2、分库分表

    读写分离主要应对高并发。分库分表主要应对数据库存储压力。
    分库:将数据库的数据分散到不同数据库上。如:1、将两张表分别放到不同数据库上;2、将一张表水平拆分成两张表,分别放到不同数据库上。
    分表:对单表的数据进行拆分,可以垂直,可以水平拆分。
    垂直拆分,对表的列拆分。
    水平拆分,对表的数据行拆分。

    3、分库分表的场景

    分表,单表的数据达到千万级别以上,数据库读写速度慢。
    分库,1、数据库的数据占用空间大,备份时间长;2、应用并发量大。

    4、分库分表的挑战

    1. join操作
    2. 事务问题
    3. 分布式id
  • 相关阅读:
    无线渗透_COWPATTY破解密码
    JavaScript 71 JavaScript JSON 71.9 JSON 服务器
    基于SSM技术的oa办公管理系统的设计与实现毕业设计源码100934
    1、年千亿营收企业Java研发人员日常使用Linux命令总结
    Error: Google Play requires that apps target API level 26 or higher. 两种解决办法
    【洛谷 P1048】[NOIP2005 普及组] 采药 题解(动态规划+01背包)
    三种方式,实现多可系统外网访问
    微服务基础,分布式核心,常见微服务框架,SpringCloud概述,搭建SpringCloud微服务项目详细步骤,含源代码
    IntelliJ IDEA - Raw use of parameterized class
    【机器学习11】强化学习
  • 原文地址:https://blog.csdn.net/qq_44403239/article/details/126623422
  • 最新文章
  • C# 内存安全性的重大演进:重新定义 unsafe 关键字
    [MAF的Agent管道详解-05]对话历史的持久化和输入输出的增强
    【译】构建前先计划:带你了解 Visual Studio 中的 Plan Agent
    一行代码干翻 Java 反射?EggG 流式反射调用让反射优雅到不可思议
    RAG 负责召回,LLM Wiki 负责沉淀:团队知识系统为什么不能只做检索
    做一款企业真正敢用的AI测试应用,到底有多难?究竟难在哪?
    JaVers 版本历史功能完整实现指南
    Github Project-AI Agentic Framework (.NET)
    [MAF的Agent管道详解-04]如何让LLM按照要求的结构输出数据?
    随机过程WebApp实验室:从随机动力学到 AI 洞察的概率世界
  • 热门文章
  • 十款代码表白小特效 一个比一个浪漫 赶紧收藏起来吧!!!
    奉劝各位学弟学妹们,该打造你的技术影响力了!
    五年了,我在 CSDN 的两个一百万。
    Java俄罗斯方块,老程序员花了一个周末,连接中学年代!
    面试官都震惊,你这网络基础可以啊!
    你真的会用百度吗?我不信 — 那些不为人知的搜索引擎语法
    心情不好的时候,用 Python 画棵樱花树送给自己吧
    通宵一晚做出来的一款类似CS的第一人称射击游戏Demo!原来做游戏也不是很难,连憨憨学妹都学会了!
    13 万字 C 语言从入门到精通保姆级教程2021 年版
    10行代码集2000张美女图,Python爬虫120例,再上征途
小工具 小游戏
Copyright © 2022 侵权请联系2656653265@qq.com    京ICP备2022015340号-1

京公网安备 11010502049817号