• Redis分布式缓存(一)| 单机安装、RDB和AOF持久化



    分布式缓存

    基于Redis集群解决单机Redis存在的问题

    单机的Redis存在四大问题:

    [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-8RfAxVjG-1656318122285)(assets/image-20210725144240631.png)]


    0.单机安装Redis

    0.1.首先需要安装Redis所需要的依赖:

    yum install -y gcc tcl
    
    • 1

    0.2.下载reids安装包

    链接:https://pan.baidu.com/s/122Cwr-YxAYgV72_8v6nlfQ
    提取码:fwkv

    我这里放到/tmp目录

    cd /tmp
    
    • 1

    解压安装包:

    tar -xvf redis-6.2.4.tar.gz
    
    • 1

    进入redis目录:

    cd redis-6.2.4
    
    • 1

    运行编译命令:

    make && make install
    
    • 1

    如果没有出错,应该就安装成功了。


    以下命令都是在当前目录/tmp/redis-6.2.4/下操作
    然后修改redis.conf文件中的一些配置:

    # 绑定地址,默认是127.0.0.1,会导致只能在本地访问。修改为0.0.0.0则可以在任意IP访问
    bind 0.0.0.0
    # 数据库数量,设置为1,也可以不设置,默认16
    databases 1
    
    • 1
    • 2
    • 3
    • 4

    启动redis服务,然后新开一个linux连接窗口进行操作:

    redis-server redis.conf
    
    • 1

    停止redis服务:

    redis-cli shutdown
    
    • 1

    1.Redis持久化

    Redis有两种持久化方案:

    • RDB持久化(默认开启
    • AOF持久化(默认关闭)

    1.1.RDB持久化

    RDB全称Redis Database Backup file(Redis数据备份文件),也被叫做Redis数据快照。简单来说就是把内存中的所有数据都记录到磁盘中。当Redis实例故障重启后,从磁盘读取快照文件,恢复数据。快照文件称为RDB文件,默认是保存在当前运行目录。

    1.1.1.执行时机

    RDB持久化在四种情况下会执行:

    • 执行save命令
    • 执行bgsave命令
    • Redis停机时
    • 触发RDB条件时

    0)基于上一步的redis服务启动后,新开一个窗口连接redis

    redis-cli
    
    • 1

    在这里插入图片描述

    1)save命令

    执行下面的命令,可以立即执行一次RDB:
    在这里插入图片描述

    save命令会导致主进程执行RDB,这个过程中其它所有命令都会被阻塞。只有在数据迁移时可能用到。

    2)bgsave命令

    下面的命令可以异步执行RDB:
    在这里插入图片描述

    这个命令执行后会开启独立进程完成RDB,主进程可以持续处理用户请求,不受影响。

    3)停机时
    Redis停机时会执行一次save命令,实现RDB持久化。

    4)触发RDB条件

    Redis内部有触发RDB的机制,可以在redis.conf文件中找到,格式如下:

    # 900秒内,如果至少有1个key被修改,则执行bgsave , 如果是save "" 则表示禁用RDB
    save 900 1  
    save 300 10  
    save 60 10000 
    
    • 1
    • 2
    • 3
    • 4

    RDB的其它配置也可以在redis.conf文件中设置:

    # 是否压缩,建议不开启,压缩也会消耗cpu,磁盘的话不值钱
    rdbcompression yes
    
    # RDB文件名称
    dbfilename dump.rdb  
    
    # 文件保存的路径目录
    dir ./ 
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8

    1.1.2.RDB原理

    bgsave开始时会fork主进程得到子进程,子进程共享主进程的内存数据。完成fork后读取内存数据并写入 RDB 文件。

    fork采用的是copy-on-write技术:

    • 当主进程执行读操作时,访问共享内存;
    • 当主进程执行写操作时,则会拷贝一份数据,执行写操作。
      在这里插入图片描述

    1.1.3.小结

    RDB方式bgsave的基本流程?

    • fork主进程得到一个子进程,共享内存空间
    • 子进程读取内存数据并写入新的RDB文件
    • 用新RDB文件替换旧的RDB文件

    RDB会在什么时候执行?save 60 1000代表什么含义?

    • 默认是服务停止时
    • 代表60秒内至少执行1000次修改则触发RDB

    RDB的缺点?

    • RDB执行间隔时间长,两次RDB之间写入数据有丢失的风险
    • fork子进程、压缩、写出RDB文件都比较耗时

    1.2.AOF持久化

    1.2.1.AOF原理

    AOF全称为Append Only File(追加文件)。Redis处理的每一个写命令都会记录在AOF文件,可以看做是命令日志文件。

    在这里插入图片描述


    1.2.2.AOF配置

    AOF默认是关闭的,需要修改redis.conf配置文件来开启AOF:

    # 是否开启AOF功能,默认是no
    appendonly yes
    # AOF文件的名称
    appendfilename "appendonly.aof"
    
    • 1
    • 2
    • 3
    • 4

    如果不使用RDB,而直接使用AOF,则把redis.conf配置文件中的save设置为""(实际开发中结合RDBAOF一起使用)

    # 关闭RDB
    save ""
    
    • 1
    • 2

    AOF的命令记录的频率也可以通过redis.conf文件来配:

    # 表示每执行一次写命令,立即记录到AOF文件
    appendfsync always 
    # 写命令执行完先放入AOF缓冲区,然后表示每隔1秒将缓冲区数据写到AOF文件,是默认方案
    appendfsync everysec 
    # 写命令执行完先放入AOF缓冲区,由操作系统决定何时将缓冲区内容写回磁盘
    appendfsync no
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6

    三种策略对比:
    在这里插入图片描述


    1.2.3.AOF文件重写

    因为是记录命令,AOF文件会比RDB文件大的多。而且AOF会记录对同一个key的多次写操作,但只有最后一次写操作才有意义。通过执行bgrewriteaof命令,可以让AOF文件执行重写功能,用最少的命令达到相同效果。

    在这里插入图片描述

    如图,AOF原本有三个命令,但是set num 123 和 set num 666都是对num的操作,第二次会覆盖第一次的值,因此第一个命令记录下来没有意义。

    所以重写命令后,AOF文件内容就是:mset name jack num 666

    Redis也会在触发阈值时自动去重写AOF文件。阈值也可以在redis.conf中配置:

    # AOF文件比上次文件 增长超过多少百分比则触发重写
    auto-aof-rewrite-percentage 100
    # AOF文件体积最小多大以上才触发重写 
    auto-aof-rewrite-min-size 64mb 
    
    • 1
    • 2
    • 3
    • 4

    1.3.RDB与AOF对比

    RDB和AOF各有自己的优缺点,如果对数据安全性要求较高,在实际开发中往往会结合两者来使用。
    在这里插入图片描述


    下一篇:Redis分布式缓存(二)| 主从架构搭建、全量/增量同步原理、主从同步优化

    
    
    
    • 1
    • 2
  • 相关阅读:
    软件使用经验合集(操作系统、常用软件)
    解决AnyViewer干扰控制端输入法的问题
    ovs实现的几种openflow扩展消息
    基于ArcGIS水文分析、HEC-RAS模拟技术在洪水危险性及风险评估
    数据分析必备原理思路(二)
    docker笔记
    C语言,从联合看字节序
    LeetCode75-05:压缩字符串
    干货分享 | MindSpore21天实战营手记(四):基于YOLOV3-DarkNet50的篮球检测模型
    网络之数据链路层(PPP协议)
  • 原文地址:https://blog.csdn.net/qq_25112523/article/details/125486460