• 关于mysql join 的一些说明


    文章目录


    • 结论: 使用小表作为驱动表
    • 一般效率: hash > BKA >= 临时表 BKA > NLJ > BNL >SNL;
    • 假设驱动表数据量N, 被驱动表数据量M, 由于a=[0,1),则 aN

    join类型原理说明
    SNL相当于嵌套的两层 for 循环这个查询方式有点傻,mysql 没有使用
    NLJ-可接受的联接查询先查驱动表,被驱动表关了字段有索引,走索引扫描(树查找),需要回表; 没有使用 join_buffermysql 中的NLJ 指的就是 index-NLJ; O(N + N*log(M))
    BNL - 一般不可接受的联接查询驱动表放 join_buffer(数据无序), 放不下时分 Block 多(假设k,k=aN)次join; 被驱动表联接字段没有索引,驱动表中每行数据查找会扫全表,找到后在与内存中join_buffer 内容一行行匹配O(N + aN*M), join_buffer 一次性放下驱动表数据时,aN =1, 此时时间复杂度: O(N + M), 因此可以通过 增大 join_buffer 加快查询速度,其他使用 join_buffer 的情况优化同理
    BKA相当于 NLJ 驱动表的关联字段放到 join_buffer后排序,join_buffer 中数据批量传给被驱动表的联接索引字段,在普通得到连续的主键字段,回表时会使用到磁盘顺序读; NLJ 使用磁盘顺序读特性优化后 变为BKA, 需要配置开启MRR(innodb 默认策略关闭为on,开启mrr_based=off)基于一个前提: 大多数数据是按主键索引递增顺序插入的; 时间复杂度: O(N + aN*log(M)),但是其每次 io 性能提高了
    BNL 优化 成BKA (使用临时表)被驱动表联接字段加索引(冷查询成本高,不合适); 将被驱动表要查询的数据放临时表,在临时表的要联接的字段上加索引; 开启mrr 即可走 BKAjoin_buffer 不够时,也可能分批次,所以时间复杂度: O(N + aN*log(M) + 临时表建表成本)
    Hash-Join (join_buffer 够用CHJ)相当于 for 循环加Map 匹配联接字段O(N + N*hash)
    分块 hash-join (On-Disk Hash-Join)mysql 8.0.18 使用驱动表分块使用 join_buffer , 被驱动表对每块 probe
    hash 分片 hash-joinmysql 8.0.18 使用 没看太懂
    Grace-Hash-Joinoracle 使用没看懂,先不写
    hybrid Hash-JoinOceanBase 使用也没看出区别, 先不写
  • 相关阅读:
    Numpy数组计算实训
    Android切圆角的几种方式
    2023/11/7 JAVA学习(异常处理方式,collection集合,list,set)
    电脑误删除的文件怎么恢复?妙招解决它
    【纯干货】SpringBoot 整合 ES 进行各种高级查询搜索
    【网安AIGC专题10.19】论文6:Java漏洞自动修复+数据集 VJBench+大语言模型、APR技术+代码转换方法+LLM和DL-APR模型的挑战与机会
    性能测试 —— 性能测试常见的测试指标 !
    Fragment之间进行通信的最佳实现方式
    牛客java训练题 day1
    csdn软件测试入门的测试基本流程
  • 原文地址:https://blog.csdn.net/wwq921220/article/details/126089883