前言
在我们平常工作中,总会有这样的事情发生:服务无法承受过多的请求而被打挂。
一般我们可以从两个方面处理:
- 增加节点,水平扩展(钱总是万能的)
- 对请求量过高的接口进行限流(没钱也不是不可以)
突发情况下我们会先用第一种方案,然后再过渡到第二种。毕竟:穷就一个字
随着这样的事情发生多了,系统就会可以预计的朝这样的方向演变:
- 单个接口的限流 -> 多个接口的限流
觉醒能力:限流可以配置,想要对哪个接口进行限流,就改下配置,立即生效。 - 单个系统需要限流 -> 多个系统需要限流
觉醒能力:限流功能组件化,后续还有系统需要限流功能,引入依赖即可,不需要重复开发。 - 等等
通过这样的推论:每个系统都会发生高并发 -> 每个系统都会朝这个方向演变 -> 总有演变了很久的系统 -> 网上是否已经存在这样的轮子?
别说,真的有!今天我们要认识的主角Sentinel
就是这样的又大又圆的轮子~
介绍
随着微服务的流行,服务和服务之间的稳定性变得越来越重要。Sentinel 是面向分布式服务架构的流量控制组件,主要以流量为切入点,从流量控制、熔断降级、系统自适应保护等多个维度来帮助您保障微服务的稳定性。
官网地址:https://sentinelguard.io/zh-cn/
话不多说,先来个案例感受感受
案例
需求:要求每秒钟通过的qps限定在20
注:案例中所有统计相关的代码只是为了更加直观的体现sentinel的作用
引入依赖:
<dependency> <groupId>com.alibaba.csp</groupId> <artifactId>sentinel-core</artifactId> <version>1.8.2</version> </dependency>
1. 定义流控规则
private void initFlowRules() { // 定义流控规则 FlowRule rule = new FlowRule(); // 资源名与需要限流的资源名相同 rule.setResource("HelloWorld"); // 设置限流方式为QPS rule.setGrade(RuleConstant.FLOW_GRADE_QPS); // 设置QPS为20 rule.setCount(20); // 加载规则 FlowRuleManager.loadRules(Collections.singletonList(rule)); }
2. 模拟请求
// 记录请求总数 private static final AtomicInteger TOTAL = new AtomicInteger(); // 记录请求通过数 private static final AtomicInteger PASS = new AtomicInteger(); // 记录请求拒绝数 private static final AtomicInteger BLOCK = new AtomicInteger(); private void request() { for (int i = 0; i < 30; i++) { new Thread(() -> { while (true){ // 记录总qps TOTAL.incrementAndGet(); // 进行限流 try (Entry entry = SphU.entry("HelloWorld")) { // 记录通过数 PASS.incrementAndGet(); } catch (BlockException e) { // 记录拒绝数 BLOCK.incrementAndGet(); } // 模拟业务等待0-50毫秒 try { TimeUnit.MILLISECONDS.sleep(new Random().nextInt(50)); } catch (InterruptedException ignored) { } } }).start(); } }
3. 统计
public void count() { new Thread(() -> { int oldTotal = 0, oldPass = 0, oldBlock = 0; while (true){ // 计算当前qps int total = TOTAL.get(); int secondsTotal = total - oldTotal; oldTotal = total; // 计算每秒通过数 int pass = PASS.get(); int secondsPass = pass - oldPass; oldPass = pass; // 计算每秒拒绝数 int block = BLOCK.get(); int secondsBlock = block - oldBlock; oldBlock = block; log.info("当前qps:{}, pass: {}, block:{}", secondsTotal, secondsPass, secondsBlock); try { // 停顿一秒 TimeUnit.SECONDS.sleep(1); } catch (InterruptedException ignored) { } } }).start(); }
4.测试
@Test public void testBlock() throws IOException { // 初始化规则 this.initFlowRules(); // 模拟高并发访问 this.request(); // 统计qps this.count(); // 防止程序终止 System.in.read(); }
5.测试结果
总体来说,测试结果符合预期
思考
以上案例是最简单的入门案例,也是Sentinel的核心所在。
其中关键的代码便是:SphU.entry("HelloWorld")
如果还想在其他业务代码中增加限流,则需要做出如下修改并增加流控规则
try (Entry entry = SphU.entry("资源名")) { // 业务代码 } catch (BlockException e) { // 根据异常进行处理 }
但是很明显,这是一个通用代码块,唯一的变量就是"资源名",我们很容易就想到通过切面的方式进行优化
如果是你,你会想要怎么改造它呢?
我们先来看看Sentinel的切面使用方式吧
整合SpringBoot
1.引入注解依赖
<dependency> <groupId>com.alibaba.csp</groupId> <artifactId>sentinel-annotation-aspectj</artifactId> <version>1.8.2</version> </dependency>
2. 编写Controller&Servcie的Demo
@RestController @RequestMapping("/foo") public class FooController { @Autowired private FooService fooService; @GetMapping public String hello(String name) { return fooService.hello(name); } }
public interface FooService { String hello(String name); }
@Service public class FooServiceImpl implements FooService { @Override public String hello(String name){ return "hello " + name; } }
3. 开启切面
@Configuration public class SentinelAspectConfiguration { @Bean public SentinelResourceAspect sentinelResourceAspect() { return new SentinelResourceAspect(); } }
4. 增加注解与限流处理
@SentinelResource(value = "hello", blockHandler = "exceptionHandler") @Override public String hello(String name){ return "hello " + name; } public String exceptionHandler(String name, BlockException ex) { return "被限流了"; }
blockHandler: 限流对应的处理方法,方法参数和返回值与业务方法相同,对应着入门案例中的catch逻辑
关于SentinelResource
注解的更多信息:https://github.com/alibaba/Sentinel/wiki/%E6%B3%A8%E8%A7%A3%E6%94%AF%E6%8C%81
5. 配置流控规则启动
@SpringBootApplication public class SentinelDemoApplication { public static void main(String[] args) { // 初始化流控规则 initFlowRules(); SpringApplication.run(SentinelDemoApplication.class, args); } private static void initFlowRules(){ // 定义流控规则 FlowRule rule = new FlowRule(); // 资源名注解中的相同 rule.setResource("hello"); // 设置限流方式为QPS rule.setGrade(RuleConstant.FLOW_GRADE_QPS); // 设置QPS为2 rule.setCount(2); // 加载规则 FlowRuleManager.loadRules(Collections.singletonList(rule)); } }
6.测试
curl 'http://localhost:8080/foo?name=张三'
7.结果
在页面上多刷新几次就将出现我们在exceptionHanlder中返回的"被限流了"提示语
再次思考
整合是整合了,不知道大家有没有像我一样:有股吃了苍蝇一般的难受感
一个注解就要配一个限流规则,反正我算是吐了。
有关限流异常处理的逻辑可以使用公共的,大家可以查看上面贴出的官方文档链接
那么我们应该怎么样才能让自己内心畅通呢?
我们仔细品一下加载规则的逻辑,如果我们把这个步骤写成一个接口?
哦豁,那我这个规则岂不是想加就加,想改就改?
这里我就不演示了,因为Sentinel已经把这件事情做了,并且还很贴心的做了一个控制台~
整合Sentinel控制台
1. 安装Sentinel控制台
下载jar包
下载地址:https://github.com/alibaba/Sentinel/releases
启动
java -Dserver.port=8080 -Dcsp.sentinel.dashboard.server=localhost:8080 -Dproject.name=sentinel-dashboard -jar sentinel-dashboard.jar
默认账号密码为:sentinel sentinel
如果想要修改默认的账号密码,可增加参数
-Dsentinel.dashboard.auth.username=sentinel
-Dsentinel.dashboard.auth.password=123456
2. 添加依赖
<!-- 通信依赖 --> <dependency> <groupId>com.alibaba.csp</groupId> <artifactId>sentinel-transport-simple-http</artifactId> <version>1.8.2</version> </dependency> <!-- webmvc适配 --> <dependency> <groupId>com.alibaba.csp</groupId> <artifactId>sentinel-spring-webmvc-adapter</artifactId> <version>1.8.2</version> </dependency>
3. 编写测试接口
@GetMapping("/test") public String test() { return "ok"; }
4. 配置统一异常处理
@Slf4j public class MyBlockExceptionHandler implements BlockExceptionHandler { @Override public void handle(HttpServletRequest request, HttpServletResponse response, BlockException e) throws Exception { response.setContentType(MediaType.APPLICATION_JSON_VALUE); response.setStatus(HttpServletResponse.SC_OK); try (PrintWriter out = response.getWriter()) { out.write(new ObjectMapper().writeValueAsString("{\"message\":\"被限流了\"}")); out.flush(); } catch (IOException ignored) { } } }
将处理器加入到拦截器中
@Configuration public class InterceptorConfig implements WebMvcConfigurer { @Override public void addInterceptors(InterceptorRegistry registry) { // Add Sentinel interceptor addSpringMvcInterceptor(registry); } private void addSpringMvcInterceptor(InterceptorRegistry registry) { SentinelWebMvcConfig config = new SentinelWebMvcConfig(); config.setBlockExceptionHandler(new MyBlockExceptionHandler()); // 区分请求方式 config.setHttpMethodSpecify(true); registry.addInterceptor(new SentinelWebInterceptor(config)).addPathPatterns("/**"); } }
6.配置控制台地址
在resources下新建sentinel.properties
配置文件
#应用名称 project.name=sentinel-demo #sentinel控制台地址 csp.sentinel.dashboard.server=localhost:8081
5.测试
第一次请求接口用于触发控制台初始化
curl 'http://localhost:8080/foo/test'
打开控制台并登录
在簇点链路栏中可以看到出现了刚才访问的资源地址
点击+流控
按钮
一个qps阈值为2的规则
再次测试,多刷几次:curl 'http://localhost:8080/foo/test'
配置已然生效
眼尖的小伙伴已经发现了:左边的菜单栏好多规则可以配置,我们下次再聊吧~
问题
确实,在加入控制台之后解决了之前的问题,但是又产生了新的问题,不知道小伙伴有没有发现?
之前我们的流控规则是写在代码里的,服务停止重启都会重新加载到内存中。
现在我们把规则配置在sentinel控制台,由控制台推送到服务中。
注意:我们启动sentinel时并没有配置过数据库,所以如果服务重启了,配置会消失吗?
答案是会的,那么又怎么才能解决这个问题呢?
由于太久没更新过了,还没恢复状态,今天的内容也挺多了,下次吧~
小结
今天介绍了Sentinel这个强大的流量防护工具——虽然只是初窥门径,但不妨碍大家感受到他的强大之处。
我们从一个最基本的案例出发,通过对上一个案例的思考,引出下一个案例的解决方案,循序渐进。
同时在最后,我还留下了一点点问题供大家思考,大家也可以上官网进行寻找解决方案。
最后,希望大家有所收获~