缓存的设计要分多个层次,在不同的层次上选择不同的缓存,包括JVM缓存、文件缓存和Redis缓存。
适用本地(JVM)缓存的场景:
这里的文件缓存是基于http协议的文件缓存,一般放在nginx中。
因为静态文件(比如css,js, 图片)中,很多都是不经常更新的。nginx使用proxy_cache将用户的请求缓存到本地一个目录。下一个相同请求可以直接调取缓存文件,就不用去请求服务器了。
- server {
- listen 80 default_server;
- server_name localhost;
- root /mnt/blog/;
- location / {
- }
- #要缓存文件的后缀,可以在以下设置。
- location ~ .*\.(gif|jpg|png|css|js)(.*) {
- proxy_pass http://ip地址:90;
- proxy_redirect off;
- proxy_set_header Host $host;
- proxy_cache cache_one;
- proxy_cache_valid 200 302 24h;
- proxy_cache_valid 301 30d;
- proxy_cache_valid any 5m;
- expires 90d;
- add_header wall "hello lagou.";
- }
- }
分布式缓存,采用主从+哨兵或RedisCluster的方式缓存数据库的数据。
在实际开发中:
GuavaCache的缓存设置方式:
CacheBuilder.newBuilder().maximumSize(num) // 超过num会按照LRU算法来移除缓存
Nginx的缓存设置方式:
- http {
- ...
- proxy_cache_path /path/to/cache levels=1:2 keys_zone=my_cache:10m max_size=10g inactive=60m use_temp_path=off;
- server {
- proxy_cache mycache;
- location / {
- proxy_pass http://localhost:8000;
- }
- }
- }
Redis缓存设置:
- maxmemory=num # 最大缓存量 一般为内存的3/4
- maxmemory-policy allkeys lru #
Redis缓存淘汰策略的选择
命中:可以直接通过缓存获取到需要的数据。
不命中:无法直接通过缓存获取到想要的数据,需要再次查询数据库或者执行其它的操作。原因可能是由于缓存中根本不存在,或者缓存已经过期。
通常来讲,缓存的命中率越高则表示使用缓存的收益越高,应用的性能越好(响应时间越短、吞吐量越高),抗并发的能力越强。由此可见,在高并发的互联网系统中,缓存的命中率是至关重要的指标。
通过info命令可以监控服务器状态
- 127.0.0.1:6379> info
- # Server
- redis_version:5.0.5
- redis_git_sha1:00000000
- redis_git_dirty:0
- redis_build_id:e188a39ce7a16352
- redis_mode:standalone
- os:Linux 3.10.0-229.el7.x86_64 x86_64
- arch_bits:64
- #缓存命中
- keyspace_hits:1000
- #缓存未命中
- keyspace_misses:20
- used_memory:433264648
- expired_keys:1333536
- evicted_keys:1547380
命中率=1000/1000+20=83%
一个缓存失效机制,和过期时间设计良好的系统,命中率可以做到95%以上。
影响缓存命中率的因素:
利用info命令就可以了解Redis的状态了,主要监控指标有:
- connected_clients:68 #连接的客户端数量
- used_memory_rss_human:847.62M #系统给redis分配的内存
- used_memory_peak_human:794.42M #内存使用的峰值大小
- total_connections_received:619104 #服务器已接受的连接请求数量
- instantaneous_ops_per_sec:1159 #服务器每秒钟执行的命令数量 qps
- instantaneous_input_kbps:55.85 #redis网络入口kps
- instantaneous_output_kbps:3553.89 #redis网络出口kps
- rejected_connections:0 #因为最大客户端数量限制而被拒绝的连接请求数量
- expired_keys:0 #因为过期而被自动删除的数据库键数量
- evicted_keys:0 #因为最大内存容量限制而被驱逐(evict)的键数量
- keyspace_hits:0 #查找数据库键成功的次数
- keyspace_misses:0 #查找数据库键失败的次数
Redis监控平台:grafana、prometheus以及redis_exporter。