SpringBoot集成Redis业务功能 02、定时任务+Redis删除特定前缀key的优雅实现

简介: SpringBoot集成Redis业务功能 02、定时任务+Redis删除特定前缀key的优雅实现

方案思路


之前重置玩家每日积分3次是采用redis来实现的,每位玩家在进行重置积分操作时,就会进行存储reids的键值对,key时拼接玩家uid的字符串,value则是每日次数,在set时是设置24小时也就是1天过期。


基于此方案上,我想了想那么就使用定时任务+批量删除redis前缀key来实现比较合适。


其中的批量删除redis的前缀key有两种方案实现:


直接使用keys命令来进行匹配所有的key,然后进行批量delete删除(不推荐)。【问题:数据量达到几百万,keys这个指令就会导致 Redis 服务卡顿,因为 Redis 是单线程程序,顺序执行所有指令,其它指令必须等到当前的 keys 指令执行完了才可以继续 。】

使用scan渐进式遍历获取到所有的key,实现keys的效果,需要进行多次scan**(推荐)**。【好处:采用渐进式遍历的方式来解决keys命令可能带来的阻塞问题,每次scan命令的时间复杂度是 O(1) ,但是要真正实现keys的功能,需要执行多次scan。】

redis+lua脚本(暂未使用)。

当前实现方案中就是使用的scan渐进式遍历来进行获取。


实现方案


批量删除redis的key


关于SpringBoot如何集成Redis见:SpringBoot整合篇 04、Springboot整合Redis


在下面代码中我们使用到了MultiKeyCommands,这个类是jedis里的,那么我们就需要将redis启动器中的lettuce替换为jedis,如下来进行排除依赖并添加jedis依赖:


<!--redis配置-->
<dependency>
    <groupId>org.springframework.boot</groupId>
    <artifactId>spring-boot-starter-data-redis</artifactId>
    <exclusions>
        <exclusion>
            <groupId>io.lettuce</groupId>
            <artifactId>lettuce-core</artifactId>
        </exclusion>
    </exclusions>
</dependency>
<!--  排除lettuce,使用jedis      -->
<dependency>
    <groupId>redis.clients</groupId>
    <artifactId>jedis</artifactId>
    <scope>compile</scope>
</dependency>



下面scan方法已经封装好了,使用方式:调用方法,直接传入要匹配的前缀key即可使用scan返回所有匹配到的key。


一轮是获取1000个的。
/**
 * redis工具类
 */
@SuppressWarnings(value = { "unchecked", "rawtypes" })
@Component
public class RedisCache {
   /**
     *
     * @param key 要匹配的key前缀
     * @return 匹配到的批量key值
     */
    public Set<String> scan(String key) {
        return (Set<String>) redisTemplate.execute((RedisCallback<Set<String>>) connection -> {
            HashSet<String> keys = new HashSet<>();
            JedisCommands commands = (JedisCommands) connection.getNativeConnection();
            MultiKeyCommands multiKeyCommands = (MultiKeyCommands) commands;
            //组装scan请求参数(匹配内容+请求数量)
            ScanParams scanParams = new ScanParams();
            scanParams.match("*" + key + "*");
            scanParams.count(1000);
            //执行scan命令(批量去获取)
            ScanResult<String> scan = multiKeyCommands.scan("0", scanParams);
            while (scan.getCursor() != null) {
                keys.addAll(scan.getResult());
                if ("0".equals(scan.getCursor())) {
                    break;
                }
                scan = multiKeyCommands.scan(scan.getCursor(), scanParams);
            }
            return keys;
        });
    }
}


定时任务


定时任务使用Spring给我们提供的,按照如下进行配置即可:


1、在启动器上开启定时任务注解


@EnableScheduling //开启定时任务


2、注册Bean对象,在指定的方法上添加定时任务注解


对于定时任务的cron表示式可用在线工具生成:cron表达式生成工具


生成的是7位,而@Scheduled中的cron要求是6位,我们只需要把最后一位表示年的去年即可。

package com.chuangmeng.horserace.tasks;


import com.chuangmeng.horserace.constant.RedisKeyConstant;
import com.chuangmeng.horserace.utils.RedisCache;
import lombok.extern.slf4j.Slf4j;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.scheduling.annotation.Scheduled;
import org.springframework.stereotype.Component;
import org.springframework.util.ObjectUtils;
import java.util.Set;
@Component
@Slf4j
public class PlayerTask {
    @Autowired
    private RedisCache redisCache;
    /**
     * 每天晚上12点重置玩家积分
     */
    @Scheduled(cron = "0 0 0 * * ?")
    public void resetPlayerIntegral() {
        String key = "xxx";
        Set<String> keys = redisCache.scan(key);
        log.info("相关重置积分的key为:" + keys);
        if (!ObjectUtils.isEmpty(keys)) {
            redisCache.deleteObject(keys);
            log.info("重置玩家积分完成!");
        }
    }
}



完成重置操作也很简单,就是调用下scan()方法,然后拿到所有的key,执行删除命令就好。


测试

使用redis手动来去进行匹配前缀key:


# 方式一:使用keys来进行匹配
keys "chuangmeng:horserace:resetimtegral:*"
# 方式二:使用scan来进行渐进式获取,第一次设置游标为0,会响应过来两个数据,一个是下一次你要进行遍历开始的游标,以及一组匹配的数据。若是下一组游标为0,那么就无需进行scan获取了,已经获取了全部
scan 0 match "chuangmeng:horserace:resetimtegral:*"
scan 17 match "chuangmeng:horserace:resetimtegral:*"
# 删除key
del chuangmeng:horserace:resetimtegral:3334322232  chuangmeng:horserace:resetimtegral:12364322232


对于程序的话我们测试可以设置个1分钟定时任务或者直接在test中调用方法测试即可!

相关文章
|
9月前
|
NoSQL Java 网络安全
SpringBoot启动时连接Redis报错:ERR This instance has cluster support disabled - 如何解决?
通过以上步骤一般可以解决由于配置不匹配造成的连接错误。在调试问题时,一定要确保服务端和客户端的Redis配置保持同步一致。这能够确保SpringBoot应用顺利连接到正确配置的Redis服务,无论是单机模式还是集群模式。
721 5
|
10月前
|
NoSQL Java 调度
分布式锁与分布式锁使用 Redis 和 Spring Boot 进行调度锁(不带 ShedLock)
分布式锁是分布式系统中用于同步多节点访问共享资源的机制,防止并发操作带来的冲突。本文介绍了基于Spring Boot和Redis实现分布式锁的技术方案,涵盖锁的获取与释放、Redis配置、服务调度及多实例运行等内容,通过Docker Compose搭建环境,验证了锁的有效性与互斥特性。
856 0
分布式锁与分布式锁使用 Redis 和 Spring Boot 进行调度锁(不带 ShedLock)
|
9月前
|
XML Java 应用服务中间件
【SpringBoot(一)】Spring的认知、容器功能讲解与自动装配原理的入门,带你熟悉Springboot中基本的注解使用
SpringBoot专栏开篇第一章,讲述认识SpringBoot、Bean容器功能的讲解、自动装配原理的入门,还有其他常用的Springboot注解!如果想要了解SpringBoot,那么就进来看看吧!
771 2
|
XML 前端开发 Java
SpringBoot实现文件上传下载功能
本文介绍了如何使用SpringBoot实现文件上传与下载功能,涵盖配置和代码实现。包括Maven依赖配置(如`spring-boot-starter-web`和`spring-boot-starter-thymeleaf`)、前端HTML页面设计、WebConfig路径映射配置、YAML文件路径设置,以及核心的文件上传(通过`MultipartFile`处理)和下载(利用`ResponseEntity`返回文件流)功能的Java代码实现。文章由Colorful_WP撰写,内容详实,适合开发者学习参考。
1202 0
|
缓存 NoSQL Java
Redis应用—6.热key探测设计与实践
热key问题在高并发系统中可能导致数据层和服务层的严重瓶颈,如Redis集群瘫痪和用户体验下降。为解决此问题,京东开发了JdHotkey热key探测框架,具备实时性、准确性、集群一致性和高性能等特点。该框架由etcd集群、Client端jar包、Worker端集群和Dashboard控制台组成,通过分布式计算快速识别热key并推送至应用内存,有效减轻数据层负载,提升服务性能。JdHotkey适用于多种场景,安装部署简便,支持毫秒级热key探测和集群一致性维护。
867 61
Redis应用—6.热key探测设计与实践
|
12月前
|
缓存 前端开发 Java
SpringBoot 实现动态菜单功能完整指南
本文介绍了一个动态菜单系统的实现方案,涵盖数据库设计、SpringBoot后端实现、Vue前端展示及权限控制等内容,适用于中后台系统的权限管理。
1192 1
|
机器学习/深度学习 数据采集 人机交互
springboot+redis互联网医院智能导诊系统源码,基于医疗大模型、知识图谱、人机交互方式实现
智能导诊系统基于医疗大模型、知识图谱与人机交互技术,解决患者“知症不知病”“挂错号”等问题。通过多模态交互(语音、文字、图片等)收集病情信息,结合医学知识图谱和深度推理,实现精准的科室推荐和分级诊疗引导。系统支持基于规则模板和数据模型两种开发原理:前者依赖人工设定症状-科室规则,后者通过机器学习或深度学习分析问诊数据。其特点包括快速病情收集、智能病症关联推理、最佳就医推荐、分级导流以及与院内平台联动,提升患者就诊效率和服务体验。技术架构采用 SpringBoot+Redis+MyBatis Plus+MySQL+RocketMQ,确保高效稳定运行。
887 0
|
安全 Java API
Spring Boot 功能模块全解析:构建现代Java应用的技术图谱
Spring Boot不是一个单一的工具,而是一个由众多功能模块组成的生态系统。这些模块可以根据应用需求灵活组合,构建从简单的REST API到复杂的微服务系统,再到现代的AI驱动应用。
1674 8
|
监控 安全 Java
Java 开发中基于 Spring Boot 3.2 框架集成 MQTT 5.0 协议实现消息推送与订阅功能的技术方案解析
本文介绍基于Spring Boot 3.2集成MQTT 5.0的消息推送与订阅技术方案,涵盖核心技术栈选型(Spring Boot、Eclipse Paho、HiveMQ)、项目搭建与配置、消息发布与订阅服务实现,以及在智能家居控制系统中的应用实例。同时,详细探讨了安全增强(TLS/SSL)、性能优化(异步处理与背压控制)、测试监控及生产环境部署方案,为构建高可用、高性能的消息通信系统提供全面指导。附资源下载链接:[https://pan.quark.cn/s/14fcf913bae6](https://pan.quark.cn/s/14fcf913bae6)。
2654 0