缓存 Redis 在项目中合理使用经验总结

简介: Redis 是一个开源的内存数据结构存储系统。可以作为数据库、缓存和消息中间件使用。

背景

  • Redis 是一个开源的内存数据结构存储系统。
  • 可以作为数据库、缓存和消息中间件使用。
  • 支持多种类型的数据结构。
  • Redis 内置了 复制(replication),LUA脚本(Lua scripting), LRU驱动事件(LRU eviction),事务(transactions) 和不同级别的 磁盘持久化(persistence)。
  • 通过 Redis 哨兵(Sentinel)和 Redis 集群(Cluster)的自动分区,提供高可用性(high availability)。

基本数据类型

  • 字符串(strings)

1、string 的过期时间在重新设置值之后会被清除

127.0.0.1:6379> set hello 3
OK
127.0.0.1:6379> get hello
"3"
127.0.0.1:6379> ttl hello
(integer) -1
127.0.0.1:6379> expire hello 3000
(integer) 1
127.0.0.1:6379> set hello 4
OK
127.0.0.1:6379> ttl hello
(integer) -1

2、设置 string 类型的值可以覆盖任何其他类型

127.0.0.1:6379> sadd settest 1,2
(integer) 1
127.0.0.1:6379> type settest
set
127.0.0.1:6379> set settest hello
OK
127.0.0.1:6379> type settest
string
127.0.0.1:6379> sadd settest a,b
(error) WRONGTYPE Operation against a key holding the wrong kind of value
  • 散列(hashes)
  • 列表(lists)

Redis lists 基于 Linked Lists 实现。头尾操作极速,检索较慢

  • 集合(sets)
  • 支持范围查找的有序集合(sorted sets)

有序集合的排序默认按照字典序排列

  • bitmaps
  • hyperloglogs
  • 支持按半径索引查询的地理空间(geospatial)

应用场景

string

  • 缓存数据

不管是简单和复杂的数据都可以直接转为string存储。

key:active:spring2019:title value:"2019春节活动" 操作:set

商品信息,省市区信息,活动配置等一系列不常变化的冷数据缓存

非常热门数据的缓存,游戏排行,后台每秒更新一次数据

  • 简单计数

2019春节活动参加人数

key:active:spring2019:total value:3045 操作:incr

  • 定时过期

一个人一天只能进行一次签到

key:active:checkin:userId:10000:day:20190101 value:签到时间戳 操作:expire

  • 分布式锁

下面的代码不严谨,nx 可以放并发

127.0.0.1:6379> set lockkey 1  nx
OK
127.0.0.1:6379> set lockkey 1  nx
(nil)

list

  • 用户排队

push,pop

  • 有序消息

push,pop

  • 实现生产者和消费者模型

阻塞式访问 BRPOP 和 BLPOP 命令

set

  • 去重列表

2019春节活动参加人数

key:active:spring2019:users value:100010,10020 操作:很多

  • 标签

用户标签

商家标签

春节活动一共有 abcde 5个任务,用户A已经完成a,b,用户B已经完成 c,d

  • 交集

用户A,用户B 都完成的任务

  • 并集

用户A,用户B 任一完成的任务

  • 差集

用户A还没有完成的任务

  • 获取随机元素

从礼品库 set 中随机获得一个礼品

hash

  • 同一资源的不同属性

用户在活动期间一共获得了不同种类奖品数量

key:active:spring:g'ifts:user:10010 value:{"giftA":2,"giftB":5} 操作:很多

可以直接对 giftA 执行 incr 操作

zset

  • 排行榜

用户消费排行,点赞排行等

key:active:spring:star:rank value:用户ID,score:点赞数量 操作:很多

根据分数获取 top 10

查询某个用户的分数

查询 得分在90-100 之间的用户

有时候我们的得分并不是由某一项业务值决定的,可能是由两项业务值来排序的,比如先看用户的实际得分,在看用户等级,那么我们在设计score的时候可以用小数点之前的值表示得分,小数点之后的值表示等级,如果有其他特殊要求,还可以考虑得分加上某个极大值来处理。

注意事项

  • 每个 key 都应该有合理的失效时间
  • string的过期时间在重新设值后会被覆盖
  • string类型的 set 操作可以覆盖类型
  • 合理使用相应的数据结构

不要用list存大量数据并检索

  • 合理规划 key 的数量

判断用户有没有参加应该用set,不应该每个用户一个key

  • 环境数据隔离
  • 业务数据隔离 用户 redis 业务 redis 活动 redis 应该做区分,活动的 redis 在活动结束后可以自由清理
  • 合理使用管道,lua 脚本和 redis 事务,提高性能,尤其是在脚本中使用 redis 的时候
  • 在有大量 key 的 Reids 线上系统,要在主库禁用 keys * 操作,防止卡死
相关文章
|
11月前
|
缓存 NoSQL 关系型数据库
美团面试:MySQL有1000w数据,redis只存20w的数据,如何做 缓存 设计?
美团面试:MySQL有1000w数据,redis只存20w的数据,如何做 缓存 设计?
美团面试:MySQL有1000w数据,redis只存20w的数据,如何做 缓存 设计?
|
6月前
|
缓存 负载均衡 监控
135_负载均衡:Redis缓存 - 提高缓存命中率的配置与最佳实践
在现代大型语言模型(LLM)部署架构中,缓存系统扮演着至关重要的角色。随着LLM应用规模的不断扩大和用户需求的持续增长,如何构建高效、可靠的缓存架构成为系统性能优化的核心挑战。Redis作为业界领先的内存数据库,因其高性能、丰富的数据结构和灵活的配置选项,已成为LLM部署中首选的缓存解决方案。
644 25
|
7月前
|
存储 缓存 NoSQL
Redis专题-实战篇二-商户查询缓存
本文介绍了缓存的基本概念、应用场景及实现方式,涵盖Redis缓存设计、缓存更新策略、缓存穿透问题及其解决方案。重点讲解了缓存空对象与布隆过滤器的使用,并通过代码示例演示了商铺查询的缓存优化实践。
313 1
Redis专题-实战篇二-商户查询缓存
|
11月前
|
缓存 NoSQL Java
Redis+Caffeine构建高性能二级缓存
大家好,我是摘星。今天为大家带来的是Redis+Caffeine构建高性能二级缓存,废话不多说直接开始~
1420 0
|
6月前
|
缓存 运维 监控
Redis 7.0 高性能缓存架构设计与优化
🌟蒋星熠Jaxonic,技术宇宙中的星际旅人。深耕Redis 7.0高性能缓存架构,探索函数化编程、多层缓存、集群优化与分片消息系统,用代码在二进制星河中谱写极客诗篇。
1048 3
|
7月前
|
缓存 NoSQL 关系型数据库
Redis缓存和分布式锁
Redis 是一种高性能的键值存储系统,广泛用于缓存、消息队列和内存数据库。其典型应用包括缓解关系型数据库压力,通过缓存热点数据提高查询效率,支持高并发访问。此外,Redis 还可用于实现分布式锁,解决分布式系统中的资源竞争问题。文章还探讨了缓存的更新策略、缓存穿透与雪崩的解决方案,以及 Redlock 算法等关键技术。
|
9月前
|
存储 缓存 NoSQL
Redis 核心知识与项目实践解析
本文围绕 Redis 展开,涵盖其在项目中的应用(热点数据缓存、存储业务数据、实现分布式锁)、基础数据类型(string 等 5 种)、持久化策略(RDB、AOF 及混合持久化)、过期策略(惰性 + 定期删除)、淘汰策略(8 种分类)。 还介绍了集群方案(主从复制、哨兵、Cluster 分片)及主从同步机制,分片集群数据存储的哈希槽算法。对比了 Redis 与 Memcached 的区别,说明了内存用完的情况及与 MySQL 数据一致性的保证方案。 此外,详解了缓存穿透、击穿、雪崩的概念及解决办法,如何保证 Redis 中是热点数据,Redis 分布式锁的实现及问题解决,以及项目中分布式锁
254 1
|
11月前
|
消息中间件 缓存 NoSQL
基于Spring Data Redis与RabbitMQ实现字符串缓存和计数功能(数据同步)
总的来说,借助Spring Data Redis和RabbitMQ,我们可以轻松实现字符串缓存和计数的功能。而关键的部分不过是一些"厨房的套路",一旦你掌握了这些套路,那么你就像厨师一样可以准备出一道道饕餮美食了。通过这种方式促进数据处理效率无疑将大大提高我们的生产力。
338 32
|
存储 缓存 NoSQL
Spring Boot2.5 实战 MongoDB 与高并发 Redis 缓存|学习笔记
快速学习 Spring Boot2.5 实战 MongoDB 与高并发 Redis 缓存
Spring Boot2.5 实战 MongoDB 与高并发 Redis 缓存|学习笔记
|
缓存 NoSQL 安全
6.0Spring Boot 2.0实战 Redis 分布式缓存6.0|学习笔记
快速学习6.0Spring Boot 2.0实战 Redis 分布式缓存6.0。
636 0
6.0Spring Boot 2.0实战 Redis 分布式缓存6.0|学习笔记