码农知识堂 - 1000bd
  •   Python
  •   PHP
  •   JS/TS
  •   JAVA
  •   C/C++
  •   C#
  •   GO
  •   Kotlin
  •   Swift
  • 数据库读写分离和分库分表


    1、读写分离

    读写分离可以将对数据库的读写操作分别作用在不同的数据库节点上,可以小幅提升写的性能,大幅提升读的性能。
    一般情况下,读多写少,会选择一台服务作为主库,多台服务作为从库。

    1.1、读写分离的问题

    主库和从库的数据同步存在延迟,会在延迟的时间段中存在数据不一致问题。主从同步延迟。
    可能的解决办法:

    1. 将写入之后需要立即读取的请求,放到主库处理
    2. 延迟读取

    1.2、实现读写分离

    1.2.1、步骤

    1. 部署多台数据库服务,选择一台作为主库,其它为从库
    2. 保证主库和从库的数据实时同步,即主从复制
    3. 将写的请求交给主库处理,读的请求交给从库处理

    1.2.2、实现方式

    1. 代理方式
      在应用和数据之间使用代理层,将数据请求提交给代理层,由代理曾负责读写的请求转发。
    2. 组件方式
      通过引入第三方组件来实现。如:sharding-jdbc

    1.3、主从复制原理

    在MySQL中,有MySQL binlog二进制日志文件,记录了数据的所有变化,包括执行的DDL和DML语句。可以通过MySQL的二进制日志文件进行主从数据同步。

    1. 主库将数据库中数据的变化写入到 binlog
    2. 从库连接主库
    3. 从库会创建一个 I/O 线程向主库请求更新的 binlog
    4. 主库会创建一个 binlog dump 线程来发送 binlog ,从库中的 I/O 线程负责接收
    5. 从库的 I/O 线程将接收的 binlog 写入到 relay log 中。
    6. 从库的 SQL 线程读取 relay log 同步数据本地(也就是再执行一遍 SQL )。

    2、分库分表

    读写分离主要应对高并发。分库分表主要应对数据库存储压力。
    分库:将数据库的数据分散到不同数据库上。如:1、将两张表分别放到不同数据库上;2、将一张表水平拆分成两张表,分别放到不同数据库上。
    分表:对单表的数据进行拆分,可以垂直,可以水平拆分。
    垂直拆分,对表的列拆分。
    水平拆分,对表的数据行拆分。

    3、分库分表的场景

    分表,单表的数据达到千万级别以上,数据库读写速度慢。
    分库,1、数据库的数据占用空间大,备份时间长;2、应用并发量大。

    4、分库分表的挑战

    1. join操作
    2. 事务问题
    3. 分布式id
  • 相关阅读:
    CSS面试题
    世界互联网大会|云轴科技ZStack受邀分享云原生超融合
    2022/7/2做题总结
    MySQL 生僻概念汇总
    【C++】C++ 语言对 C 语言的加强 ② ( 变量检测增强 - C++ 不允许重复定义变量 | struct 关键字增强 - struct 作用等同于 class )
    了解模板模式
    国内代码托管平台Gitee(码云)的入门使用
    Spring Boot结合FFmpeg实现视频会议系统视频流处理与优化
    C++ 基础入门 之 程序流程结构-选择结构if三目switch/循环结构while/dowhile/for/跳转结构break/continue/goto
    docker 部署jenkins + sonarqube + postgresql 代码扫描
  • 原文地址:https://blog.csdn.net/qq_44403239/article/details/126623422
  • 最新文章
  • 【JVM】编译执行与解释执行的区别是什么?JVM 使用哪种方式?
    用 Hashids 优雅解决 C 端自增 ID 暴露问题
    V8引擎 精品漫游指南--Ignition篇(上) 指令 栈帧 槽位 调用约定 内存布局 基础内容
    LLVM Pass快速入门(四):代码插桩
    milkup:桌面端 markdown AI续写和即时渲染
    基于项目工程构建SBOM(软件物料清单)的研究
    鸿蒙应用开发UI基础第二节:鸿蒙应用程序框架核心解析与实操
    .NET 中如何快速实现 List 集合去重?
    扣子Coze实战:从0到1打造抖音+小红书热点监控智能体
    浅谈数据访问层
  • 热门文章
  • 十款代码表白小特效 一个比一个浪漫 赶紧收藏起来吧!!!
    奉劝各位学弟学妹们,该打造你的技术影响力了!
    五年了,我在 CSDN 的两个一百万。
    Java俄罗斯方块,老程序员花了一个周末,连接中学年代!
    面试官都震惊,你这网络基础可以啊!
    你真的会用百度吗?我不信 — 那些不为人知的搜索引擎语法
    心情不好的时候,用 Python 画棵樱花树送给自己吧
    通宵一晚做出来的一款类似CS的第一人称射击游戏Demo!原来做游戏也不是很难,连憨憨学妹都学会了!
    13 万字 C 语言从入门到精通保姆级教程2021 年版
    10行代码集2000张美女图,Python爬虫120例,再上征途
小工具 小游戏
Copyright © 2022 侵权请联系2656653265@qq.com    京ICP备2022015340号-1

京公网安备 11010502049817号