• redis持久化,主从,哨兵


    daemonize介绍

    介绍

    redis.conf配置文件中daemonize守护线程,默认是NO。
    daemonize是用来指定redis是否要用守护线程的方式启动。

    daemonize 设置yes或者no区别

    daemonize:yes:

    redis采用的是单进程多线程的模式。当redis.conf中选项daemonize设置成yes时,代表开启守护进程模式。在该模式下,redis会在后台运行,并将进程pid号写入至redis.conf选项pidfile设置的文件中,此时redis将一直运行,除非手动kill该进程。

    daemonize:no:

    当daemonize选项设置成no时,当前界面将进入redis的命令行界面,exit强制退出或者关闭连接工具(putty,xshell等)都会导致redis进程退出。

    redis持久化

    介绍

    所有备份都分两种情况,一种是快照,一种是备份

    RDB触发三种方式

    save

    客户端执行save命令----》redis服务端----》同步创建RDB二进制文件,如果老的RDB存在,会替换老的

    bgsave

    客户端执行save命令----》redis服务端----》异步创建RDB二进制文件,如果老的RDB存在,会替换老的

    配置文件

    1. save 900 1
    2. save 300 10
    3. save 60 10000
    4. # 如果60s中改变了1w条数据,自动生成rdb
    5. # 如果300s中改变了10条数据,自动生成rdb
    6. # 如果900s中改变了1条数据,自动生成rdb

    aof

    介绍

    AOF的三种策略 :

    always:redis–》写命令刷新的缓冲区—》每条命令fsync到硬盘—》AOF文件
    everysec(默认值):redis——》写命令刷新的缓冲区—》每秒把缓冲区fsync到硬盘–》AOF文件
    no:redis——》写命令刷新的缓冲区—》操作系统决定,缓冲区fsync到硬盘–》AOF文件

    AOF重写

    -本质:本质就是把过期的,无用的,重复的,可以优化的命令,来优化

    手动开启

    在客户端主动输入:bgrewriteaof

    配置文件

    1. # AOF持久化配置最优方案
    2. appendonly yes #将该选项设置为yes,打开
    3. appendfilename "appendonly.aof" # 文件保存的名字
    4. appendfsync everysec # 采用第二种策略
    5. dir ./data # 存放的路径
    6. no-appendfsync-on-rewrite yes # 在aof重写的时候,是否要做aof的append操作,因为aof重写消耗性能,磁盘消耗,正常aof写磁盘有一定的冲突,这段期间的数据,允许丢失

    主从复制(一主一从一主多从)

    介绍原理

    全量同步

    Redis全量复制一般发生在Slave初始化阶段,这时Slave需要将Master上的所有数据都复制一份。具体步骤如下:

    • 从服务器连接主服务器,发送SYNC命令;
    • 主服务器接收到SYNC命名后,开始执行BGSAVE命令生成RDB文件并使用缓冲区记录此后执行的所有写命令;
    • 主服务器BGSAVE执行完后,向所有从服务器发送快照文件,并在发送期间继续记录被执行的写命令;
    • 从服务器收到快照文件后丢弃所有旧数据,载入收到的快照;
    • 主服务器快照发送完毕后开始向从服务器发送缓冲区中的写命令;
    • 从服务器完成对快照的载入,开始接收命令请求,并执行来自主服务器缓冲区的写命令;

    增量同步

    Redis增量复制是指Slave初始化后开始正常工作时主服务器发生的写操作同步到从服务器的过程。

    增量复制的过程主要是主服务器每执行一个写命令就会向从服务器发送相同的写命令,从服务器接收并执行收到的写命令。

    Redis主从同步策略

    主从刚刚连接的时候,进行全量同步;全同步结束后,进行增量同步。当然,如果有需要,slave 在任何时候都可以发起全量同步。redis 策略是,无论如何,首先会尝试进行增量同步,如不成功,要求从机进行全量同步。

    配置

    方式一

    在从库执行

    SLAVEOF 127.0.0.1 6379

    断开关系

    slaveof no one

    方式二:配置文件(配在从库的配置文件中)

    1. slaveof 127.0.0.1 6379
    2. slave-read-only yes

    哨兵

    介绍

    让redis的主从复制高可用

    搭一个一主两从

    1. #创建三个配置文件:
    2. #第一个是主配置文件
    3. daemonize yes
    4. pidfile /var/run/redis.pid
    5. port 6379
    6. dir "/opt/soft/redis/data"
    7. logfile “6379.log”
    8. #第二个是从配置文件
    9. daemonize yes
    10. pidfile /var/run/redis2.pid
    11. port 6378
    12. dir "/opt/soft/redis/data2"
    13. logfile “6378.log”
    14. slaveof 127.0.0.1 6379
    15. slave-read-only yes
    16. #第三个是从配置文件
    17. daemonize yes
    18. pidfile /var/run/redis3.pid
    19. port 6377
    20. dir "/opt/soft/redis/data3"
    21. logfile “6377.log”
    22. slaveof 127.0.0.1 6379
    23. slave-read-only yes
    24. #把三个redis服务都启动起来
    25. ./src/redis-server redis_6379.conf
    26. ./src/redis-server redis_6378.conf
    27. ./src/redis-server redis_6377.conf
    28. 2 搭建哨兵
    29. # sentinel.conf这个文件
    30. # 把哨兵也当成一个redis服务器
    31. 创建三个配置文件分别叫sentinel_26379.conf sentinel_26378.conf sentinel_26377.conf
    32. # 当前路径下创建 data1 data2 data3 个文件夹
    33. #内容如下(需要修改端口,文件地址日志文件名字)
    34. port 26379
    35. daemonize yes
    36. dir ./data3
    37. protected-mode no
    38. bind 0.0.0.0
    39. logfile "redis_sentinel3.log"
    40. # 该行的意思是:监控的master的名字叫做mymaster (可以自定义),
    41. # 地址为192.168.88.111:6379,行尾最后的一个2代表在sentinel集群中,
    42. # 多少个sentinel认为master死了,才能真正认为该master不可用了。
    43. sentinel monitor mymaster 127.0.0.1 6379 2
    44. # 需要失效多少时间,一个主才会被哨兵认为宕机
    45. sentinel down-after-milliseconds mymaster 30000
    46. # 在主从切换时,有多少个从。可以对新的主进行同步,数字越小,完成备份的时间就越长,一般为1即可
    47. sentinel parallel-syncs mymaster 1
    48. # 同一个哨兵对一个主两次通信的最大的时间间隔
    49. sentinel failover-timeout mymaster 180000
    50. #启动三个哨兵
    51. ./src/redis-sentinel sentinel_26379.conf
    52. ./src/redis-sentinel sentinel_26378.conf
    53. ./src/redis-sentinel sentinel_26377.conf
    54. # 登陆哨兵
    55. ./src/redis-cli -p 26377
    56. # 输入 info
    57. # 查看哨兵的配置文件被修改了,自动生成的
    58. # 主动停掉主redis 6379,哨兵会自动选择一个从库作为主库
    59. redis-cli -p 6379
    60. shutdown
    61. #等待原来的主库启动,该主库会变成从库

    python客户端连接

    1. import redis
    2. from redis.sentinel import Sentinel
    3. # 连接哨兵服务器(主机名也可以用域名)
    4. # 10.0.0.101:26379
    5. sentinel = Sentinel([('10.0.0.101', 26379),
    6. ('10.0.0.101', 26378),
    7. ('10.0.0.101', 26377)
    8. ],
    9. socket_timeout=5)
    10. print(sentinel)
    11. # 获取主服务器地址
    12. master = sentinel.discover_master('mymaster')
    13. print(master)
    14. # 获取从服务器地址
    15. slave = sentinel.discover_slaves('mymaster')
    16. print(slave)
    17. ##### 读写分离
    18. # 获取主服务器进行写入
    19. # master = sentinel.master_for('mymaster', socket_timeout=0.5)
    20. # w_ret = master.set('foo', 'bar')
    21. # slave = sentinel.slave_for('mymaster', socket_timeout=0.5)
    22. # r_ret = slave.get('foo')
    23. # print(r_ret)

    集群

    # to do

  • 相关阅读:
    MySQL基础增删改查以及备份还原操作
    RISC-V 特权级架构
    【小巧玲珑】文件太大,怎么办?分卷压缩技术了解下,这才是压缩技术
    【汉字识别】基于模板匹配实现汉字精准识别附Matlab代码
    Python爬虫之Splash详解
    mysql 索引失效情况/sql提示/覆盖索引和回表查询
    IDA* AcWing 181. 回转游戏
    15:00面试,15:06就出来了,问的问题有点变态。。。
    【限流与Sentinel超详细分析】
    515万新作者投身电商事业,抖音电商将投入更多资源扶持作者长期发展
  • 原文地址:https://blog.csdn.net/qq_52385631/article/details/126493378