• Redis 详解及高级特性


    Redis 是一个基于内存的高性能键值数据库,它支持多种数据结构,包括字符串、列表、集合、有序集合和哈希表等。Redis 将数据存储在内存中,因此拥有非常高的读取和写入性能,适用于需要快速读取和写入数据的应用程序场景。同时,Redis 还支持持久化存储和数据复制等功能,更加适合在生产环境中使用。

    一、Redis 的特点

    Redis 具有以下几个特点:

    1. 高性能

    Redis 是一个使用 C 语言编写的高性能键值数据库,它采用了很多优化措施,例如:使用内存作为数据存储介质、采用单线程模型、异步 I/O 等技术,从而达到非常高的读写性能。

    1. 支持多种数据结构

    Redis 不像传统关系型数据库那样只支持表格模型,它支持多种数据结构,包括字符串、列表、集合、有序集合和哈希表等,适用于不同的应用场景。

    1. 支持数据持久化

    Redis 支持数据持久化,可以将内存中的数据异步地保存到硬盘上,保证数据不会在程序重启时丢失。同时,Redis 还支持 RDB 和 AOF 两种持久化方式,更加灵活可靠。

    1. 支持数据复制

    Redis 支持数据复制,可以将一份数据复制到多台机器上,提高系统的可用性和可靠性。

    1. 支持分布式对象缓存

    Redis 支持分布式对象缓存(Cache),可以缓存常用数据对象,避免频繁地查询数据库,提高系统的读取性能。

    1. 支持事务操作

    Redis 支持事务操作,可以在一次请求中执行多个命令,从而保证在多个命令之间的数据一致性。

    1. 支持 Lua 脚本

    Redis 支持 Lua 脚本,可以执行自定义的 Lua 脚本,实现更加灵活的业务逻辑。

    二、Redis 的数据结构

    Redis 支持多种数据结构,常用的包括以下五种:

    1. 字符串(String)

    字符串是 Redis 最基本的数据结构之一,它可以存储任何类型的字符串,包括数字、JSON、XML 等格式的字符串。常见的字符串操作命令包括:SET、GET、DEL、INCR、DECR、APPEND 等。

    1. 列表(List)

    列表是 Redis 中的一个双向链表结构,它可以存储多个相同或不同类型的元素,并且支持从列表两端进行元素的插入和删除操作。常见的列表操作命令包括:LPUSH、RPUSH、LPOP、RPOP、LRANGE 等。

    1. 集合(Set)

    集合是 Redis 中的一个无序、不重复的数据结构,它可以存储多个相同或不同类型的元素,并支持对元素进行添加、删除和查找等操作。常见的集合操作命令包括:SADD、SMEMBERS、SREM、SINTER 等。

    1. 有序集合(Sorted Set)

    有序集合是 Redis 中的一个有序、不重复的数据结构,每个元素都会关联一个分值,用来进行排序和排名。常见的有序集合操作命令包括:ZADD、ZRANK、ZSCORE、ZREVRANGE 等。

    1. 哈希表(Hash)

    哈希表是 Redis 中的一个字典结构,它可以存储多个键值对,并支持对键值对进行添加、删除和查找等操作。常见的哈希表操作命令包括:HSET、HGET、HDEL、HGETALL 等。

    三、Redis 数据类型操作指令

    Redis 提供了丰富的数据类型操作指令,以下是常用的指令:

    1. 字符串操作指令
    • SET key value:设置指定键的值。
    • GET key:获取指定键对应的值。
    • DEL key:删除指定键及其值。
    • INCR key:将指定键对应的数值加一。
    • DECR key:将指定键对应的数值减一。
    • APPEND key value:将指定字符串追加到原有字符串的末尾。
    1. 列表操作指令
    • LPUSH key value:将一个或多个值插入到列表头部。
    • RPUSH key value:将一个或多个值插入到列表尾部。
    • LPOP key:从列表头部移除并返回一个元素。
    • RPOP key:从列表尾部移除并返回一个元素。
    • LRANGE key start stop:返回列表中指定范围内的元素。
    • LINDEX key index:返回列表中指定索引位置的元素。
    1. 集合操作指令
    • SADD key member:向集合中添加一个或多个元素。
    • SMEMBERS key:返回集合中的所有元素。
    • SREM key member:移除集合中一个或多个元素。
    • SINTER key1 key2…:返回两个或多个集合的交集。
    1. 有序集合操作指令
    • ZADD key score member:向有序集合中添加一个或多个元素。
    • ZRANK key member:返回有序集合中指定元素的排名。
    • ZSCORE key member:返回有序集合中指定元素的分值。
    • ZREVRANGE key start stop:返回有序集合中指定范围内的元素,按照分值从大到小排序。
    1. 哈希表操作指令
    • HSET key field value:向哈希表中添加一个键值对。
    • HGET key field:获取哈希表中指定键的值。
    • HDEL key field:删除哈希表中指定键值对。
    • HGETALL key:返回哈希表中所有键值对。

    四、Redis 持久化与备份

    Redis 支持 RDB 和 AOF 两种持久化方式。

    1. RDB(Redis DataBase)

    RDB 是 Redis 的默认持久化方式,它通过快照(Snapshot)的方式将 Redis 当前内存中的数据保存到硬盘中。Redis 会周期性地生成 RDB 文件,用户也可以手动执行 SAVE 或 BGSAVE 命令来生成 RDB 文件。RDB 文件具有很好的压缩效果,且可靠性较高,但是可能会存在数据丢失的问题。

    1. AOF(Append-Only File)

    AOF 是 Redis 的另一种持久化方式,它以日志的形式记录每个写入 Redis 的命令,当 Redis 重启时会重新执行这些命令来恢复数据。AOF 可以在每个命令被执行时进行同步,即每个命令都写入硬盘,也可以设置定期同步或基于大小的自动同步。AOF 的可靠性较高,但是会占用较多的磁盘空间和运行时间。

    Redis 还支持数据备份,可以通过 Redis 自带的 SAVE、BGSAVE 命令或第三方工具如 RedisDumper、redis-rdb-tools 等工具来备份 Redis 数据。

    五、Redis 高级特性

    除了基本的数据结构和操作指令外,Redis 还有一些高级特性,包括:

    1. 发布与订阅

    Redis 支持发布与订阅模式,即客户端可以订阅一个或多个频道,当有消息发布到指定频道时,所有订阅该频道的客户端都会收到相应的消息。发布与订阅模式可以实现实时通知、消息推送等功能。

    1. Lua 脚本

    Redis 支持执行自定义的 Lua 脚本,开发者可以使用 Lua 语言编写各种复杂的业务逻辑,从而提高 Redis 的灵活性和可扩展性。

    1. 事务操作

    Redis 支持事务操作,可以在一次请求中执行多个命令,并在所有命令执行完成后提交或回滚事务。事务操作可以保证多个命令之间的数据一致性,避免并发操作时数据不一致的问题。

    1. 慢查询日志

    Redis 可以记录执行时间较长的命令,用户可以通过查看慢查询日志来分析系统性能瓶颈,并进行性能优化。

    六、Redis 实际应用

    Redis 可以应用于多种场景,包括:

    1. 缓存

    Redis 可以作为缓存服务,通过将常用的数据缓存到内存中,避免频繁地访问数据库,提高系统性能。

    1. 计数器

    Redis 的单线程模型可以保证计数器的原子性,并支持 INCR 和 DECR 操作,使得 Redis 可以很好地实现计数器功能。

    1. 分布式锁

    Redis 的 SETNX 操作可以用于实现分布式锁,通过在 Redis 中设置一个键值对来控制共享资源的并发访问。

    1. 队列

    Redis 的列表数据结构可以用于实现队列,通过 LPUSH 和 RPUSH 操作来向队列中添加元素,通过 LPOP 和 RPOP 操作来从队列中取出元素。

    1. 排行榜

    Redis 的有序集合数据结构可以用于实现排行榜,通过 ZADD 和 ZRANK 操作来向有序集合中添加元素和查询指定元素的排名。

    七、Redis 的优缺点

    1. 优点:

    (1)高性能:Redis 将数据缓存在内存中,具有快速读取和写入的特点,访问速度比数据库更快。

    (2)可扩展性:Redis 支持分布式架构,可以通过主从复制和 Sentinel 机制实现横向扩展,提高系统的可用性和可靠性。

    (3)灵活性:Redis 支持多种数据结构和丰富的操作指令,可以满足各种数据处理需求。

    1. 缺点:

    (1)单线程模型:Redis 使用单线程模型无法利用多核 CPU 的优势,对于 CPU 密集型任务的处理能力有限。

    (2)内存受限:Redis 将数据缓存在内存中,如果数据量过大会影响服务器的内存使用效率。

    (3)数据一致性:Redis 的主从复制机制存在数据同步延迟和数据丢失的问题,对于数据一致性要求高的场景需要进行额外的处理。

    八、常用的 Redis 客户端

    1. Lettuce

    Lettuce 是一个基于 Java 8 的轻量级 Redis 客户端,支持 Redis Sentinel、Redis Cluster 和 Redis 哨兵模式,提供异步、同步以及响应式编程模型。

    1. Jedis

    Jedis 是一个基于 Java 的 Redis 客户端,支持 Redis 4.0 版本的所有新特性,提供直接、多线程、连接池等多种使用方式。

    1. Redisson

    Redisson 是一个基于 Java 的分布式 Redis 客户端,支持 Redis 的各种数据结构和操作指令,还提供了分布式锁、分布式信号量、分布式对象等高级特性。

    1. Redis Desktop Manager

    Redis Desktop Manager 是一款基于 GUI 的 Redis 客户端,可以管理多个 Redis 实例,支持数据的导入、导出、备份、恢复等功能。

    1. redis-cli

    redis-cli 是 Redis 自带的命令行客户端,用户可以通过输入相应的命令进行 Redis 数据库的操作,是 Redis 最基础、最直接的访问方式。

    九、其他数据结构

    除了五种基本的数据类型之外,Redis 还支持一些非常有用的数据结构,这些数据结构提供了更高级别的抽象,可以帮助开发人员更容易地实现复杂的场景和功能。包括:

    1. Bitmaps

    Bitmaps 是 Redis 内置的一种特殊的字符串数据类型,可以存储二进制位图。Bitmaps 可以用于处理包含大量布尔值的数组,例如网站的统计信息,登录用户的在线状态等。

    Redis 内置了一系列可以操作 Bitmaps 的命令,例如 SETBIT、GETBIT、BITCOUNT 等。下面是一些常见的使用场景:

    (1)统计网站访问量

    假设一个网站每天都有成千上万的访问量,我们可以使用 Bitmaps 来记录每个用户的访问情况,其中每个用户占用 Bitmaps 中的一位,0 表示用户没访问,1 表示用户已经访问过。通过对一段时间内 Bitmaps 中 1 的总数进行计算,可以得到整个网站的访问量。

    具体实现方法如下:

    # 记录用户访问情况
    SETBIT web:2017-09-01:user_id 1001 1
    SETBIT web:2017-09-01:user_id 1002 1
    SETBIT web:2017-09-01:user_id 1003 1
    
    # 统计访问量
    BITCOUNT web:2017-09-01:user_id
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7

    (2)用户在线状态

    假设一个网站有成千上万的用户同时在线,我们可以使用 Bitmaps 来记录每个用户的在线状态,其中每个用户占用 Bitmaps 中的一位,0 表示用户离线,1 表示用户在线。通过对 Bitmaps 中 1 的总数进行计算,可以得到整个网站在线用户的数量。

    具体实现方法如下:

    # 记录用户登录情况
    SETBIT users:user_id 1001 1
    
    # 记录用户注销情况
    SETBIT users:user_id 1001 0
    
    # 统计在线用户数量
    BITCOUNT users:user_id
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8

    (3)社交网络关系

    假设一个社交网络中有数百万的用户,我们可以使用 Bitmaps 来记录用户之间的关系,例如好友、粉丝等。其中每个用户占用 Bitmaps 中的一行,每一列表示一个用户与当前用户之间的关系,0 表示无关系,1 表示存在关系。

    具体实现方法如下:

    # 添加好友关系
    SETBIT user:1001:friends 1002 1
    
    # 判断是否为好友关系
    GETBIT user:1001:friends 1002
    
    • 1
    • 2
    • 3
    • 4
    • 5
    1. HyperLogLog

    HyperLogLog 是 Redis 内置的基数统计算法,可以用来估算大量不重复元素的数量。HyperLogLog 的原理是通过随机哈希函数计算元素的摘要值,然后通过对摘要值的统计分析来估算元素的数量。

    HyperLogLog 数据结构可以使用 PFADD 和 PFCOUNT 命令进行操作,例如:

    # 添加元素
    PFADD key element1 element2 element3
    
    # 统计元素个数
    PFCOUNT key
    
    • 1
    • 2
    • 3
    • 4
    • 5

    HyperLogLog 虽然无法精确计算元素的数量,但在处理大规模数据时性能非常快,占用内存空间也很小。HyperLogLog 的典型应用场景包括统计网站的 UV、PV、IP 数量等。

    1. Geospatial Indexes

    Geospatial Indexes 是 Redis 内置的一种地理位置索引数据类型,可以用来存储和处理地理位置信息。Geospatial Indexes 支持存储经纬度信息和复杂的空间形状信息,并可以进行距离计算、最近邻查询等功能。

    在 Redis 中,Geospatial Indexes 数据结构基于 ZSET 实现,其中 ZSET 的 score 表示位置的经度,member 表示位置的纬度。使用 GEOADD、GEORADIUS、GEODIST 等命令可以方便地管理和查询位置数据。例如:

    # 添加位置信息
    GEOADD cities 121.47 31.23 Shanghai
    GEOADD cities 116.40 39.90 Beijing
    
    # 查找附近的城市
    GEORADIUS cities 117.59 34.15 500 km
    
    # 计算两个城市之间的距离
    GEODIST cities Shanghai Beijing
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8
    • 9

    Geospatial Indexes 在处理地理位置信息时非常有效,可以广泛应用于各种场景,例如餐厅搜索、车辆定位、社交网络等。

    1. Streams

    Streams 是 Redis 最新的数据类型,是基于日志数据结构实现的可持久化、有序的消息队列。Streams 支持多个生产者和消费者,并支持消息的延迟、分组、阻塞等高级特性。

    在 Streams 中,每条消息都有唯一的 ID,而且消息可以被按照时间顺序进行排序。同时,Streams 还支持消费者组,可以避免重复消费和数据丢失的问题。

    Streams 使用 XADD、XLEN、XRANGE 等命令来操作消息队列,例如:

    # 添加消息
    XADD stream * name john age 25
    
    # 查询消息列表
    XRANGE stream - +
    
    # 查询未读消息数量
    XLEN stream
    
    # 消费消息
    XREADGROUP GROUP consumer_group consumer_name COUNT 10 STREAMS stream >
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8
    • 9
    • 10
    • 11

    Streams 可以帮助开发人员快速构建可靠的消息系统,可以广泛应用于各种场景,例如实时聊天、日志记录、事件通知等。

    1. Scripting

    Scripting 不是一种特定的数据类型,而是 Redis 提供的一种脚本语言,可以使用 Lua 语言编写 Redis 脚本。通过 Redis 脚本,开发人员可以在 Redis 服务器端执行自定义的操作序列,这些操作序列可以由多个 Redis 操作指令组成,也可以实现更加复杂的业务逻辑。

    Redis 脚本支持多种参数传递方式和返回值类型,并且可以通过 EVAL、EVALSHA 等命令进行加载和执行。下面是一个简单的 Redis 脚本示例:

    -- 计算并返回两个数字的和
    redis.call('SET', KEYS[1], ARGV[1] + ARGV[2])
    return redis.call('GET', KEYS[1])
    
    • 1
    • 2
    • 3

    脚本语言是 Redis 中非常重要的特性之一,可以通过脚本实现各种自定义功能,提高 Redis 的灵活性和可扩展性。

  • 相关阅读:
    y86.第四章 Prometheus大厂监控体系及实战 -- prometheus存储(十七)
    arm下安装pytorch
    python打开浏览器并模拟搜索
    GO channel 学习
    通过代码MyBatis-plus实现对表中createTime和updateTime进行自动更新
    鸿鹄工程项目管理系统 Spring Cloud+Spring Boot+Mybatis+Vue+ElementUI+前后端分离构建工程项目管理系统项目背景
    JavaFX 节点
    Split index API
    解决使用react devtools调试工具时无法显示组件名称的问题
    IDEA插件的在线离线安装
  • 原文地址:https://blog.csdn.net/u012581020/article/details/130659745