消息(Message)是指在应用间传送的数据。消息可以非常简单,比如只包含文本字符串,也可以更复杂,可能包含嵌入对象。
消息队列(Message Queue)是一种应用间的通信方式,消息发送后可以立即返回,由消息系统来确保消息的可靠传递。消息发布者只管把消息发布到 MQ 中而不用管谁来取,消息使用者只管从 MQ 中取消息而不管是谁发布的
MQ,中文是消息队列(MessageQueue),字面来看就是存放消息的队列。也就是事件驱动架构中的Broker。
比较常见的MQ实现:
几种常见MQ的对比:
RabbitMQ | ActiveMQ | RocketMQ | Kafka | |
---|---|---|---|---|
公司/社区 | Rabbit | Apache | 阿里 | Apache |
开发语言 | Erlang | Java | Java | Scala&Java |
协议支持 | AMQP,XMPP,SMTP,STOMP | OpenWire,STOMP,REST,XMPP,AMQP | 自定义协议 | 自定义协议 |
可用性 | 高 | 一般 | 高 | 高 |
单机吞吐量 | 一般 | 差 | 高 | 非常高 |
消息延迟 | 微秒级 | 毫秒级 | 毫秒级 | 毫秒以内 |
消息可靠性 | 高 | 一般 | 高 | 一般 |
追求可用性:Kafka、 RocketMQ 、RabbitMQ
追求可靠性:RabbitMQ、RocketMQ
追求吞吐能力:RocketMQ、Kafka
追求消息低延迟:RabbitMQ、Kafka
RabbitMQ是基于Erlang语言开发的开源消息通信中间件,官网地址:https://www.rabbitmq.com/
具有:大并发、消息可靠、响应快速、等优点
拉取镜像
docker pull rabbitmq:版本
运行容器
docker run \
-e RABBITMQ_DEFAULT_USER=root \
-e RABBITMQ_DEFAULT_PASS=123456 \
--name mq \
--hostname mq1 \
-p 15672:15672 \
-p 5672:5672 \
-d \
rabbitmq:3-management
注意:外网访问需要开放15672和5672端口
访问http://ip:15672即可进入web管理界面
SpringAmqp的官方地址:https://spring.io/projects/spring-amqp
Advanced Message Queuing Protocol,是用于在应用程序之间传递业务消息的开放标准。该协议与语言和平台无关,更符合微服务中独立性的要求
Spring AMQP是基于AMQP协议定义的一套API规范,提供了模板来发送和接收消息。包含两部分,其中spring-amqp是基础抽象,spring-rabbit是底层的默认实现。
依赖
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-amqp</artifactId>
</dependency>
基础配置
spring:
rabbitmq:
host: ip # rabbitMQ的ip地址
port: 5672 # 端口
username: 用户名
password: 密码
virtual-host: /
listener:
simple:
prefetch: 1
消息发送
@Autowired
private RabbitTemplate rabbitTemplate;
@Test
void testSimpleQueue(){
String queueName = "simple.queue";
String message = "hello amqp";
rabbitTemplate.convertAndSend (queueName,message);
}
消息接收
@Component
public class SpringRabbitListener {
@RabbitListener(queues = "simple.queue")
public void listenSimpleQueue(String msg){
System.out.println ("接收到消息"+msg);
}
}
Work queue,工作队列可以提高消息处理速度,避免队列消息堆积
消息发送
模拟WorkQueue,实现一个队列绑定多个消费者
@Test
void testSimpleQueue() throws InterruptedException {
String queueName = "simple.queue";
String message = "hello amqp__";
for (int i = 0; i < 50; i++) {
rabbitTemplate.convertAndSend (queueName,message + i);
Thread.sleep (20);
}
}
@RabbitListener(queues = "simple.queue")
public void listenWorkQueue1(String msg) throws InterruptedException {
System.out.println ("接收到消息消费者1:"+msg);
Thread.sleep (20);
}
@RabbitListener(queues = "simple.queue")
public void listenWorkQueue2(String msg) throws InterruptedException {
System.out.println ("接收到消息消费者2:"+msg);
Thread.sleep (200);
}
注意RabbitMq默认两个消费者消费一样多,需要进行配置
spring:
rabbitmq:
listener:
simple:
prefetch: 1 #一次只拿一条消息
注意:
发布订阅模式与简单队列与工作队列的区别就是允许将同一条消息发送给多个发送者。实现方式就是加入了exchange(交换机)
常见的exchange类型包括:
注意:exchange负责消息路由,而不是存储,路由失败则消息丢失
Fanout Exchange会将接收到的消息广播到每一个跟其绑定的queue
在消费者服务中声明Exchange、Queue、Binding
基于Bean实现
/**
* @Author: 生如夏花
* @Date: 2022/3/15 17:07
*/
@Configuration
public class FanoutConfig {
/**
* 声明一个交换机
* @return
*/
@Bean
public FanoutExchange fanoutExchange(){
return new FanoutExchange ("test.fanout");
}
/**
* 声明一个队列
* @return
*/
@Bean
public Queue queue1(){
return new Queue("fanout.queue1");
}
/**
* 绑定交换机与队列
* @param queue1
* @param fanoutExchange
* @return
*/
@Bean
public Binding fanoutBinding1(Queue queue1,FanoutExchange fanoutExchange){
return BindingBuilder
.bind (queue1)
.to (fanoutExchange);
}
@Bean
public Queue queue2(){
return new Queue ("fanout.queue2");
}
@Bean
public Binding fanoutBinding2(Queue queue2,FanoutExchange fanoutExchange){
return BindingBuilder
.bind (queue2)
.to (fanoutExchange);
}
}
发送消息
/**
* 广播模式发送消息
* @throws InterruptedException
*/
@Test
void testSendFanoutExchange() throws InterruptedException {
String exchange = "test.fanout";
String message = "hello amqp__";
rabbitTemplate.convertAndSend (exchange,"",message);
}
接收消息
@RabbitListener(queues = "fanout.queue1")
public void listenWorkQueue1(String msg){
System.out.println ("接收到消息消费者1:"+msg);
}
@RabbitListener(queues = "fanout.queue2")
public void listenWorkQueue2(String msg){
System.out.println ("接收到消息消费者2:"+msg);
}
Direct Exchange会将接收到的消息根据路由到指定Queue,因此称为路由模式(routes)
发送消息
/**
* 路由模式发送消息
*/
@Test
void testSendDirectExchange(){
String exchange = "test.direct";
String colorKey = "yellow";
String message = "hello direct---";
rabbitTemplate.convertAndSend (exchange,colorKey,message+colorKey);
}
接收消息
基于@RabbitListener注解实现
@RabbitListener(bindings = @QueueBinding (
value = @Queue(name = "direct.queue1"),
exchange = @Exchange(name = "test.direct",type = ExchangeTypes.DIRECT),
key = {"red","blue"}
))
public void listenDirectQueue1(String msg){
System.out.println ("接收到消息:"+msg);
}
@RabbitListener(bindings = @QueueBinding (
value = @Queue(name = "direct.queue2"),
exchange = @Exchange(name = "test.direct"),
key = {"red","yellow"}
))
public void listDirectQueue2(String msg){
System.out.println ("接收到消息:"+msg);
}
TopicExchange与DirectExchange类似,区别在于routeingKey必须是多个单词的列表,并且以.分割
Queue与Exchange指定BindingKey时可以使用通配符
发送消息
/**
* 话题模式发送消息
*/
@Test
void testSendTopicExchange(){
String exchange = "test.topic";
String key = "315.news";
String message = "央视综合频道正在进行315晚会直播";
rabbitTemplate.convertAndSend (exchange,key,message);
}
接收消息
@RabbitListener(bindings = @QueueBinding (
value = @Queue("topic.queue1"),
exchange = @Exchange(value = "test.topic",type = ExchangeTypes.TOPIC),
key = {"#.news"}
))
//会接收所有.news结尾的单词
public void listTopicQueue1(String msg){
System.out.println ("接收到消息:"+msg);
}
在SpringAMQP的发送方法中,接收消息的类型是Object,也就是说我们可以发送任意对象类型的消息。SpringAMQP会帮我们序列化为字节后发送
注意:Spring的对消息对象的处理是由org.springframework.amqp.support.converter.MessageConverter来处理的,基于jdk的ObjectOutputStream完成序列化。
如果要修改只需要定义一个MessageConverter类型的Bean即可。推荐使用json方式序列化,步骤如下
引入依赖
<dependency>
<groupId>com.fasterxml.jackson.core</groupId>
<artifactId>jackson-databind</artifactId>
</dependency>
创建bean
@Bean
public MessageConverter messageConverter(){
return new Jackson2JsonMessageConverter ();
}
然后正常收发消息即可,就可以实现通过json来序列化发送接收消息的对象