Spring Cloud(八):使用Spring Cloud Bus来实现配置动态更新
使用Spring Cloud Config我们能实现服务配置的集中化管理,在服务启动时从Config Server获取需要的配置属性。但如果在服务运行过程中,我们需要将某个配置属性进行修改,比如将验证码的失效时间从五分钟调整为十分钟,如何将这个更新在服务端不重启服务就能动态生效,是本文讨论的内容。
Spring Cloud Bus
Spring Cloud Bus可以理解为Spring Cloud体系架构中的消息总线,通过一个轻量级的Message Broker来将分布式系统中的节点连接起来。可用来实现广播状态更新(如配置更新),或其它管理指令。
Spring Cloud Bus 就像是一个分布式的Spring Boot Actuator, 目前提供了两种类型的消息队列中间件支持:RabbitMQ与Kafka(对应的pom依赖分别为spring-cloud-starter-bus-amqp, spring-cloud-starter-bus-kafka)。
Spring Cloud 在spring-cloud-context中添加了两个actuator管理接口(POST请求): /actuator/env
与 /actuator/refresh
, 前者可用于更新当前服务实例Environment对象中的配置属性,后者可用于刷新当前服务实例的配置信息。
Spring Cloud Bus也提供了两个对应的接口
/actuator/bus-env
,相对于/actuator/env
, 使用键值对更新每个实例的Environment,默认不暴露,需配置management.endpoints.web.exposure.include=bus-env 来开放接口访问/actuator/bus-refresh
,相对于/actuator/refresh
,对每个实例,清空RefreshScope
缓存,重新绑定@ConfigurationProperties, 默认不暴露,可通过配置
management.endpoints.web.exposure.include=bus-refresh 来开放接口访问
综上,/actuator/env
与 /actuator/refresh
是针对单个服务实例修改或刷新其配置信息,而 /actuator/bus-env
与 /actuator/bus-refresh
则是借助于Spring Cloud Bus的消息机制作用于分布式系统中的所有服务实例,因此前面有Spring Cloud Bus 就像是一个分布式的Spring Boot Actuator的说法。
使用Spring Cloud Bus来实现服务配置动态更新的结构图如下
- 更新配置仓库中的配置文件,push到远程Git仓库
- 远程Git仓库通过Webhook调用配置服务器的通知更新接口
- 配置服务器发送配置更新消息到消息总线
- 其它服务节点监听到配置服务器发送的配置更新消息
- 其它服务节点向配置服务器发送拉取最新配置的请求
- 配置服务器向配置仓库拉取最新的配置返回给其它服务节点
案例演示
我们还是以前面的springcloud-config, springcloud-eureka, springcloud-eureka-client三个项目来完成本文的案例演示。源码地址
使用Actuator
在不引入Spring Cloud Bus的情况下,我们可以通过Spring Cloud提供的actuator接口来实现单个实例的配置动态更新。
依次启动springcloud-eureka, springcloud-config, springcloud-eureka-client项目,然后修改springcloud-eureka-client的启动端口,将8080改为8081,再启动一个springcloud-eureka-client的服务实例。
springcloud-eureka-client 的测试接口代码如下
@RestController
@RefreshScope
public class HelloController {
@Autowired
private Environment env;
@Value("${app}")
private String app;
@RequestMapping("/hello")
public String hello(){
return "Hello, welcome to spring cloud 2. env: " + env.getProperty("app") + ", value: " + app;
}
}
此时依次请求两个实例的hello接口,得到结果如下
我们通过/actuator/env
接口来修改端口8080实例的属性app的值,使用postman操作如图
此时再请求接口返回结果如下
可以看到Environment对象中app属性的值已更新,但是 @Value注解的属性值未变,可见 /actuator/env
接口只是更新了Environment对象,并不负责刷新其它方式引用的属性值。此时请求另一个端口为8081的实例接口,其属性值都未更新,也可见 /actuator/env
只作用于当前实例本身。
如果要让8080实例的@Value属性也动态更新,则可再调用/actuator/refresh
接口,如图
此时再请求测试接口,得到结果如下(@Value注解的属性也已经更新了)
使用Spring Cloud Bus
前面我们使用 /actuator/env
与 /actuator/refresh
两个接口可以实现单个服务实例配置的动态更新,但在微服务架构中,服务实例可能达几十甚至几百个,一个个调用来做动态更新就有点太不方便了。这时就该Spring Cloud Bus登场了。
1.添加依赖与配置
在springcloud-config, 与springcloud-eureka-client两个项目中,添加spring cloud bus的依赖与配置。
在pom.xml文件中添加依赖
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-bus-amqp</artifactId>
</dependency>
在application.yml配置文件中添加RabbitMQ的相关配置
spring:
rabbitmq:
host: 127.0.0.1
port: 5672
username: rabbitmq
password: passw0rd
2.依次启动springcloud-eureka, springcloud-config, springcloud-eureka-client项目,并以8081端口再启动一个springcloud-eureka-client的服务实例。
3.我们使用postman对配置服务器调用/actuator/bus-env
接口,
请求两个服务实例的测试接口,得到结果
两个实例的Environment对象都已经更新,如果要将@Value注解的属性也更新,则可再调用配置服务器的/actuator/bus-refresh
接口。
/actuator/bus-env
接口是直接更新的内存Environment实例属性,如果服务重启,则又还原到之前的配置了, 所以还是需要借助配置仓库来永久更新。配置更新后还需要手动调用接口使其生效?DevOps时代了,能自动化的就自动化吧,我们可以借助Git的webhook机制来实现自动化。
自动化
本文开头的“使用Spring Cloud Bus来实现服务配置动态更新的结构图”已经示例了使用Git仓库的webhook来触发自动更新配置的流程。但是在Git(如Github)中,我们不能直接使用/actuator/bus-refresh
接口来作为webhook(因为接口协议不一致,会出现解析异常),也有人通过提供自己的接口来作为webhook,在自己接口中再转发请求到/actuator/bus-refresh
来实现。但实际上,spring-cloud-config-monitor已经提供了对Git webhook的支持。
如下图,spring-cloud-config-monitor提供了对Github,Gitlab,Gitee,BitBucket等的支持
1.在配置服务器springcloud-config的pom.xml文件中添加依赖
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-config-monitor</artifactId>
</dependency>
2.在配置仓库的设置页面配置webhook,比如Github的配置如图
Payload URL 配置为配置服务器的monitor接口地址,path参数必须。如果你的配置服务器在内网,比如做本地测试时,还需要实现一下内网穿透(如frp)。
在配置仓库项目中修改配置属性,提交代码,Github webhook就会触发自动更新,上图下方红色框为触发自动更新的记录。
自动更新配置未生效排查
如果出现Github触发了自动更新,但服务的配置更新未生效的情况,则需要查看webhook的匹配规则与服务实例的ServiceID是否匹配,webhook的匹配规则为 spring.application.name:spring.cloud.config.profile:**
,服务实例的ServiceID可通过spring.cloud.bus.id
配置,如果没有配置,则默认为
${vcap.application.name:${spring.application.name:application}}:${vcap.application.instance_index:${spring.application.index:${local.server.port:${server.port:0}}}}:${vcap.application.instance_id:${random.value}}
遵循app:index:id的格式,
- app:如果vcap.application.name存在,使用vcap.application.name,否则使用spring.application.name,默认值为application
- index:优先使用vcap.application.instance_index,如果不存在则依次使用spring.application.index、local.server.port、server.port, 默认值为0
- id:如果vcap.application.instance_id存在,使用vcap.application.instance_id,否则给一个随机值
我们可以在服务项目中打开spring cloud bus的debug日志
logging:
level:
org.springframework.cloud.bus: debug
通过DefaultBusPathMatcher的debug日志来查看是否匹配,如
DEBUG 286196 --- [7O8XC9KNWbyDA-1] o.s.cloud.bus.DefaultBusPathMatcher : In match: hello-service:8081:c96f04c81dfce6dffaa9d116811d127c, hello-service:8081:c96f04c81dfce6dffaa9d116811d127c
如果没有匹配则可以按照webhook的匹配规则设置spring.cloud.bus.id
值或vcap.application.instance_index
值,如
spring:
application:
name: hello-service
cloud:
config:
discovery:
service-id: config-server
enabled: true
profile: ${spring.profiles.active:default}
bus:
id: ${spring.application.name}:${spring.cloud.config.profile}:${random.value}
#或
vcap:
application:
instance_index: ${spring.cloud.config.profile}
配置更新未生效的另一个情况是查看是否用了@RefreshScope注解。
@RefreshScope
细心的人会发现本文开头的测试接口类上加了@RefreshScope注解。 @RefreshScope是Spring Cloud提供的用来实现配置、实例热加载的注解。被@RefreshScope修饰的@Bean都是延迟加载的,即在第一次访问(调用方法)时才会被初始化,并且这些bean存于缓存中。当收到配置更新的消息时,缓存中的@RefreshScope bean会被清除,这样下次访问时将会重新创建bean,此时使用的就是最新的配置信息,从而实现配置的热加载。
总结
本文分别示例了使用spring boot actuator与spring cloud bus来实现服务配置的更新及两者之间的区别, spring cloud bus一定程度上像是一个分布式的spring boot actuator。同时演示了使用webhook与spring cloud bus,monitor结合来实现配置自动更新的具体流程及可能遇到的问题。
认真生活,快乐分享!如果你觉得文章对你有帮助,欢迎分享转发!
欢迎关注微信公众号:空山新雨的技术空间
获取Spring Boot,Spring Cloud,Docker等系列技术文章
Spring Cloud(八):使用Spring Cloud Bus来实现配置动态更新的更多相关文章
- Spring点滴八:Spring注入集合
在Spring中我们通过value属性来配置基本数据类型,通过标签的ref属性来配置对象的引用.这两种情况只能给bean传递一个值,那么如何传递多个值呢?Spring提供了四种Collection类型 ...
- spring boot / cloud (八) 使用RestTemplate来构建远程调用服务
spring boot / cloud (八) 使用RestTemplate来构建远程调用服务 前言 上周因家里突发急事,请假一周,故博客没有正常更新 RestTemplate介绍: RestTemp ...
- spring cloud 使用spring cloud bus自动刷新配置
Spring Cloud Bus提供了批量刷新配置的机制,它使用轻量级的消息代理(例如RabbitMQ.Kafka等)连接分布式系统的节点,这样就可以通过Spring Cloud Bus广播配置的变化 ...
- 【Spring Cloud】Spring Cloud之整合Spring Cloud Bus以及最佳实践
一.整合步骤 1)加入Maven坐标 <!-- actuator监控模块 --> <dependency> <groupId>org.springframework ...
- Spring Cloud(十一)高可用的分布式配置中心 Spring Cloud Bus 消息总线集成(RabbitMQ)
详见:https://www.w3cschool.cn/spring_cloud/spring_cloud-jl8a2ixp.html 上一篇文章,留了一个悬念,Config Client 实现配置的 ...
- 【八】Spring Cloud Config
一.分布式系统面临的--配置问题 微服务意味着要将单体应用中的业务拆分成一个个子服务,每个服务的力度相对较小,因此系统中会出现大量的服务.由于每个服务都需要必要的配置信息才能运行,所以一套集中式的.动 ...
- spring cloud微服务快速教程之(八) Spring Cloud Alibaba--nacos(二)、配置中心
0-前言 上一篇我们介绍了nacos作为服务注册发现组件的功能,nacos还具有配置中心的功能,而且支持热加载: 在此之前,配置中心有Spring Cloud Config,实际上,用这个有很多风险和 ...
- Spring Cloud Config(一):聊聊分布式配置中心 Spring Cloud Config
目录 Spring Cloud Config(一):聊聊分布式配置中心 Spring Cloud Config Spring Cloud Config(二):基于Git搭建配置中心 Spring Cl ...
- Spring顶级项目以及Spring cloud组件
作为java的屌丝,基本上跟上spring屌丝的步伐,也就跟上了主流技术. spring 顶级项目: Spring IO platform:用于系统部署,是可集成的,构建现代化应用的版本平台,具体来说 ...
随机推荐
- Linux.cp命令总提示是否覆盖
执行cp命令,其实是默认执行了cp -i命令的别名,因此总提示是否覆盖. 修改~/.bashrc,注释“alias cp='cp -i'”即可. [root@xxxx test]# vi ~/.bas ...
- 洛谷 P1463 [POI2002][HAOI2007]反素数
题目链接 题目描述 对于任何正整数x,其约数的个数记作g(x).例如g(1)=1.g(6)=4. 如果某个正整数x满足:g(x)>g(i) 0<i<x,则称x为反质数.例如,整数1, ...
- 异数OS TCP协议栈测试(二)--短连接篇
异数OS TCP协议栈测试(二)--短连接篇 本文来自异数OS社区 github: 异数OS-织梦师(消息中间件)群: 476260389 测试目标 TCP 短链接IO性能测试,Client Se ...
- 一行代码去掉Devexpress弹窗
使用的是.net hook方法: 使用代码: using System; using System.Windows.Forms; namespace AlexDevexpressToolTest { ...
- 使用Python写的WingPro7 Pyside2 和 PyQt5插件
pyside2的 import wingapi import subprocess pyside2_uic = "pyside2-uic" pyside2_qrc = " ...
- 关于不同python版本print不一致的简单解决方案
经常遇到python2.x的print不带括弧,但python3.x必须要带括弧,版本不一致,需要修改,但是面对数以十计的重复劳动,不免望而却步.其他的一些不一样的地方同理. 解决方案: 运用正则化替 ...
- 大事务造成的延迟(从binlog入手分析)
log_event.cc 入口: int Query_log_event::do_apply_event(Relay_log_info const *rli,const char *query_arg ...
- equals()和hashCode()使用总结
equals()和hashCode()使用总结 equals() Object类中的equals方法和"=="是一样的,没有区别,即俩个对象的比较是比较他们的栈内存中存储的内存地址 ...
- ios--->ios消息机制(NSNotification 和 NSNotificationCenter)
问题的背景 IOS中委托模式和消息机制基本上开发中用到的比较多,一般最开始页面传值通过委托实现的比较多,类之间的传值用到的比较多,不过委托相对来说只能是一对一,比如说页面A跳转到页面B,页面的B的值改 ...
- linux--->ab测试工具使用
ab测试工具使用 ab简介 是apache自带的压力测试工具.其原理是ab命令会创建多个并发访问线程,模拟多个访问者同时对某一URL地址进行访问.它的测试目标是基于URL的,因此,它既可以用来测试ap ...