目前使用的消息中间件MQ太多了(如java使用了RabbitMQ,而后台大数据使用了Kafka),那么有没有一种新的技术来让我们不再关注具体MQ的细节,我们只需要用一种适配绑定的方式,自动的给我们在各种MQ内切换的技术呢?这个就是Spring Cloud Stream技术的诞生。
总的一句话:屏蔽底层消息中间件的差异,降低切换成本,统一消息的编程模型。
官方网站:https://spring.io/projects/spring-cloud-stream
它是一个构件消息驱动微服务的框架。
应用程序通过inputs和outputs来与Spring Cloud Stream中的binder对象交互。
通过我们配置来binding(绑定),而Spring Cloud Stream的binder对象与消息中间件交互。
所以,我们只需要高清楚如何与Spring Cloud Stream交互就可以方便使用消息驱动模式。
通过使用Spring Integration来连接消息代理中间件以实现消息时间驱动。
Spring Cloud Stream为一些供应商的消息中间件产品提供了个性化的自动配置实现,引用了发布-订阅、消费组、分区的三个核心概念。
注:目前仅支持RabbitMQ,Kafka
通过定义绑定器Binder作为中间层,实现了应用程序与消息中间件细节之间的隔离。
Stream中的消息通信方式遵循了发布-订阅模式。
组成 | 说明 |
---|---|
Middleware | 中间件,RabbitMQ/Kafka |
Binder | Binder是应用于消息中间件之间的封装,通过Binder可以很方便的连接中间件,可以动态的改变消息类型(对应于Kafka的topic,RabbitMQ的exchange),这些都可以通过配置文件来实现 |
@Input | 注解标识输入管道,通过该输入管道接收到的消息进入应用程序 |
@Output | 注解标识输出管道,发布的消息将通过该管道离开应用程序 |
@StreamListener | 监听队列,用于消费者的队列的消息接收 |
@EnalbeBinding | 指通道channel和exchange绑定在一起 |
pom文件添加依赖:
<!--引入stream的RabbitMQ消息驱动--> <dependency> <groupId>org.springframework.cloud</groupId> <artifactId>spring-cloud-starter-stream-rabbit</artifactId> </dependency>
yml配置文件:
server: port: 8801 spring: application: name: cloud-stream-provider cloud: stream: binders: #在此处配置要绑定rabbitmq的服务信息 defaultRabbit: #表示定义的名称,用于binding集合 type: rabbit #信息组件类型 environment: #设置rabbitmq的相关的环境配置 spring: rabbitmq: host: localhost port: 5672 username: guest password: guest bindings: #服务的整合处理 output: #这个名字是一个通道的名称 destination: studyExchange #表示要使用Exchange名称定义(将消息发送到这个Exchange里面) content-type: application/json #设置消息类型,本次为json,文本则设置“text/plain” binder: defaultRabbit #设置要绑定的消息服务的具体设置 eureka: client: service-url: defaultZone: http://localhost:7001/eureka instance: lease-renewal-interval-in-seconds: 2 #设置心跳的时间间隔(默认是30秒) lease-expiration-duration-in-seconds: 5 #在此时间内未接受到心跳则移除 instance-id: send-8801.com #在信息列表时显示主机名称 prefer-ip-address: true #访问的路径变成IP地址
接口:
public interface IMessageProvider { public String send(); }
实现类:
import com.atguigu.springcloud.service.IMessageProvider; import org.springframework.cloud.stream.annotation.EnableBinding; import org.springframework.cloud.stream.messaging.Source; import org.springframework.messaging.MessageChannel; import org.springframework.messaging.support.MessageBuilder; import javax.annotation.Resource; import java.util.UUID; @EnableBinding(Source.class) //定义消息的推送管道 public class IMessageProviderImpl implements IMessageProvider { @Resource private MessageChannel output; //消息发送管道 @Override public String send() { String serial = UUID.randomUUID().toString(); output.send(MessageBuilder.withPayload(serial).build()); System.out.println("--------------serial:" + serial); return null; } }
controller层调用:
import com.atguigu.springcloud.service.IMessageProvider; import org.springframework.web.bind.annotation.GetMapping; import org.springframework.web.bind.annotation.RestController; import javax.annotation.Resource; @RestController public class SendMessageController { @Resource private IMessageProvider messageProvider; @GetMapping(value = "/sendMessage") public String sendMessage() { return messageProvider.send(); } }
pom文件添加依赖:
<!--引入stream的RabbitMQ消息驱动--> <dependency> <groupId>org.springframework.cloud</groupId> <artifactId>spring-cloud-starter-stream-rabbit</artifactId> </dependency>
yml配置文件:
server: port: 8802 spring: application: name: cloud-stream-consumer cloud: stream: binders: #在此处配置要绑定rabbitmq的服务信息 defaultRabbit: #表示定义的名称,用于binding集合 type: rabbit #信息组件类型 environment: #设置rabbitmq的相关的环境配置 spring: rabbitmq: host: localhost port: 5672 username: guest password: guest bindings: #服务的整合处理 input: #这个名字是一个通道的名称 destination: studyExchange #表示要使用Exchange名称定义(将接收这个Exchange的消息) content-type: application/json #设置消息类型,本次为json,文本则设置“text/plain” binder: defaultRabbit #设置要绑定的消息服务的具体设置(报红不影响启动!!!) eureka: client: service-url: defaultZone: http://localhost:7001/eureka instance: lease-renewal-interval-in-seconds: 2 #设置心跳的时间间隔(默认是30秒) lease-expiration-duration-in-seconds: 5 #在此时间内未接受到心跳则移除 instance-id: receive-8802.com #在信息列表时显示主机名称 prefer-ip-address: true #访问的路径变成IP地址
controller层接收:
import org.springframework.beans.factory.annotation.Value; import org.springframework.cloud.stream.annotation.EnableBinding; import org.springframework.cloud.stream.annotation.StreamListener; import org.springframework.cloud.stream.messaging.Sink; import org.springframework.messaging.Message; import org.springframework.stereotype.Component; @Component @EnableBinding(Sink.class) //开启消息驱动绑定 public class ReceiveMessageListenerController { @Value("${server.port}") private String serverPort; @StreamListener(Sink.INPUT) public void input(Message<String> message) { System.out.println("消费者1号,接收的消息为:" + message.getPayload() + "\t" + "port:" + serverPort); } }
如下案例:
如果一个订单同时被多个服务获取到,那么会造成数据错误。
Stream使用消息分组来解决这个问题。
在Stream中处于同一个group中的多个消费者是竞争关系,就能够保证消息只会被其中一个应用消费,不同组是可以全面消费的(重复消费)。
我们只需要在消息消费者的yml配置文件中添加配置:
如果存在多个消息消费者,当其中某个消费者服务崩掉了,这时候消息生产者还在推送消息,如果未配置持久化,那么这个崩溃的服务重启后就不会接收到消息。配置的属性也是group,group是支持持久化的。
即:加了group属性就支持消息的持久化