11.天气预报系统-熔断机制
这是学习的第十一篇文章,某个服务一旦出现不可用,可能会牵连整个系统造成雪崩,或者有的时候资源需要聚集在核心业务上,非核心业务就可以适当地关闭,此时就是需要有一种机制来实现系统保护和服务降级的功能。本章介绍hystrix组件。
一、定义
保护系统的一种方式,当请求超出阈值,把真实的服务接口断开,可能只是返回给你一个默认值。这样,掐断了自己的服务,又可以给用户一个响应。
对该服务的调用执行熔断,对于后续请求,不再继续调用该目标服务,而是直接返回,从而可以快速释放资源。
熔断器好处:系统稳定、减少性能损耗、及时响应、阈值可配置
熔断这一概念来源于电子工程中的断路器(Circuit Breaker)。在互联网系统中,当下游服务因访问压力过大而响应变慢或失败,上游服务为了保护系统整体的可用性,可以暂时切断对下游服务的调用。
这种牺牲局部,保全整体的措施就叫做熔断。
如果不采取熔断措施,我们的系统会怎样呢?我们来看一个栗子。当前系统中有A,B,C三个服务,服务A是上游,服务B是中游,服务C是下游。它们的调用链如下:
一旦下游服务C因某些原因变得不可用,积压了大量请求,服务B的请求线程也随之阻塞。线程资源逐渐耗尽,使得服务B也变得不可用。紧接着,服务A也变为不可用,整个调用链路被拖垮。
像这种调用链路的连锁故障,叫做雪崩。
正所谓刮骨疗毒,壮士断腕。在这种时候,就需要我们的熔断机制来挽救整个系统。
- 开启熔断:在固定时间窗口内,接口调用超时比率达到一个阈值,会开启熔断。进入熔断状态后,后续对该服务接口的调用不再经过网络,直接执行本地的默认方法,达到服务降级的效果。
- 熔断恢复:熔断不可能是永久的。当经过了规定时间之后,服务将从熔断状态回复过来,再次接受调用方的远程调用。
二、熔断和降级
- 在股票市场,熔断这个词大家都不陌生,是指当股指波幅达到某个点后,交易所为控制风险采取的暂停交易措施。相应的,服务熔断一般是指软件系统中,由于某些原因使得服务出现了过载现象,为防止造成整个系统故障,从而采用的一种保护措施,所以很多地方把熔断亦称为过载保护。
- 大家都见过女生旅行吧,大号的旅行箱是必备物,平常走走近处绰绰有余,但一旦出个远门,再大的箱子都白搭了,怎么办呢?常见的情景就是把物品拿出来分分堆,比了又比,最后一些非必需品的就忍痛放下了,等到下次箱子够用了,再带上用一用。而服务降级,就是这么回事,整体资源快不够了,忍痛将某些服务先关掉,待渡过难关,再开启回来。
降级白话理解:比如在公司 遇到贵宾要来 就把一些不重要的常规接待暂停 把这些资源供给招待贵宾 之前有个淘宝的分享 比如双11 把订单评论和收藏等功能在这一天暂停 把这些资源分给其它关键服务 比如下单
所以从上述分析来看,两者其实从有些角度看是有一定的类似性的:
- 目的很一致,都是从可用性可靠性着想,为防止系统的整体缓慢甚至崩溃,采用的技术手段;
- 最终表现类似,对于两者来说,最终让用户体验到的是某些功能暂时不可达或不可用;
- 粒度一般都是服务级别,当然,业界也有不少更细粒度的做法,比如做到数据持久层(允许查询,不允许增删改);
- 自治性要求很高,熔断模式一般都是服务基于策略的自动触发,降级虽说可人工干预,但在微服务架构下,完全靠人显然不可能,开关预置、配置中心都是必要手段;
而两者的区别也是明显的:
- 触发原因不太一样,服务熔断一般是某个服务(下游服务)故障引起,而服务降级一般是从整体负荷考虑;
- 管理目标的层次不太一样,熔断其实是一个框架级的处理,每个微服务都需要(无层级之分),而降级一般需要对业务有层级之分(比如降级一般是从最外围服务开始)
三、Spring Cloud Hystrix
Spring Cloud Hystrix是基于Netflix的开源框架Hystrix实现,该框架实现了服务熔断、线程隔离等一系列服务保护功能。对于熔断机制的实现,Hystrix设计了三种状态:
- 熔断关闭状态(Closed):服务没有故障时,熔断器所处的状态,对调用方的调用不做任何限制。
- 熔断开启状态(Open):在固定时间窗口内(Hystrix默认是10秒),接口调用出错比率达到一个阈值(Hystrix默认为50%),会进入熔断开启状态。进入熔断状态后,后续对该服务接口的调用不再经过网络,直接执行本地的fallback方法。
- 半熔断状态(Half-Open):在进入熔断开启状态一段时间之后(Hystrix默认是5秒),熔断器会进入半熔断状态。所谓半熔断就是尝试恢复服务调用,允许有限的流量调用该服务,并监控调用成功率。如果成功率达到预期,则说明服务已恢复,进入熔断关闭状态;如果成功率仍旧很低,则重新进入熔断关闭状态。
集成Hystrix也是很简单的:
demo的改造的基础是eureka-client-feign
,将其改造为eureka-client-feign-hystrix
1、引入依赖:
1 | <!--Hystrix--> |
2、添加注解@EnableCircuitBreaker,启用Hystrix
1 |
|
3、在controller方法上增加注解@HystrixCommand
1 |
|
4、测试
启动eureka和城市数据服务,再启动本服务,是正常的。
那么,我们将城市数据服务关闭,看看有没有返回我们指定的默认值。
四、改造本系统
在demo中,用@HystrixCommand
注解中的熔断时执行的方法来实现异常情况下的默认返回。现在我们要改造msa-weather-report-eureka-feign-gateway
,将其改造为msa-weather-report-eureka-feign-gateway-hystrix
,我们用新的方式,直接在DataClient
这个接口里面声明触发熔断时回调的类DataClientFallback.class
。
1 | "msa-eureka-client-zuul",fallback = DataClientFallback.class) (name = |
具体这个回调的类里面时这样写的:
1 | @Component |
也就是说,如果城市数据服务挂了,就默认返回一下我这里设置的城市;如果获取天气信息的服务挂了,我们就直接返回null;
那么,我们就相当于在feign中启用hystrix,就需要在配置文件中增加配置:
1 | feign: |
因为如果根据城市id获取天气信息的服务不可用时,我们默认直接返回null,显示页面啥都不显示时不好的,所以我们需要在前端判断一下:
1 | <!--不为空时--> |
下面就来测试一把吧!
首先时完全正常的情况,各个服务都可用:
启动如下服务:redis,weather-sureka-server
,msa-weather-city-eureka
,msa-weather-collection-eureka-feign-gateway
,msa-weather-data-eureka
,msa-weather-report-eureka-feign-gateway-hystrix
,msa-eureka-client-zuul
这六个服务:
正常的话,就会看到之前的页面:http://localhost:8083/report/cityId/101190101
城市数据服务不可用,熔断器生效:
关闭城市数据服务msa-weather-city-eureka
,造成服务不可用的现象。看页面显示是否只有我塞进去的假数据。
天气数据服务不可用,熔断器生效:
关闭天气数据API服务msa-weather-data-eureka
.看页面是否显示服务暂不可用的提示信息。
报了一个空指针错误,原因是msa-weather-report-eureka-feign-gateway-hystrix
中WeatherReportServiceImpl
中的方法原来是这样写的:
1 |
|
显然,要做一下判空操作,否则是不能调用getData()
这个方法的。
1 |
|
这样子,重新启动天气预报UI服务。就可以看到效果啦!
这样,本系统集成hystrix
就成功了。