Springboot+rabbitmq實現延時隊列的兩種方式
延時隊列顧名思義，即放置在該隊列里面的消息是不需要立即消費的，而是等待一段時間之后取出消費。那么，為什么需要延遲消費呢？我們來看以下的場景
網上商城下訂單后30分鐘后沒有完成支付，取消訂單(如：淘寶、去哪兒網) 系統創建了預約之后，需要在預約時間到達前一小時提醒被預約的雙方參會 系統中的業務失敗之后，需要重試這些場景都非常常見，我們可以思考，比如第二個需求，系統創建了預約之后，需要在預約時間到達前一小時提醒被預約的雙方參會。那么一天之中肯定是會有很多個預約的，時間也是不一定的，假設現在有1點 2點 3點 三個預約，如何讓系統知道在當前時間等于0點 1點 2點給用戶發送信息呢，是不是需要一個輪詢，一直去查看所有的預約，比對當前的系統時間和預約提前一小時的時間是否相等呢？這樣做非常浪費資源而且輪詢的時間間隔不好控制。如果我們使用延時消息隊列呢，我們在創建時把需要通知的預約放入消息中間件中，并且設置該消息的過期時間，等過期時間到達時再取出消費即可。
Rabbitmq實現延時隊列一般而言有兩種形式：第一種方式：利用兩個特性： Time To Live(TTL)、Dead Letter Exchanges（DLX）第二種方式：利用rabbitmq中的插件x-delay-message
利用TTL DLX實現延時隊列的方式TTL DLX是什么TTL
RabbitMQ可以針對隊列設置x-expires(則隊列中所有的消息都有相同的過期時間)或者針對Message設置x-message-ttl(對消息進行單獨設置，每條消息TTL可以不同)，來控制消息的生存時間，如果超時(兩者同時設置以最先到期的時間為準)，則消息變為dead letter(死信)
Dead Letter Exchanges（DLX）RabbitMQ的Queue可以配置x-dead-letter-exchange和x-dead-letter-routing-key（可選）兩個參數，如果隊列內出現了dead letter，則按照這兩個參數重新路由轉發到指定的隊列。x-dead-letter-exchange：出現dead letter之后將dead letter重新發送到指定exchangex-dead-letter-routing-key：出現dead letter之后將dead letter重新按照指定的routing-key發送
Springboot集成rabbitmq實現第一種方式在pom.xml文件中增加rabbitmq的依賴
<dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-amqp</artifactId></dependency>
初始化queue exchange和queue及exchange之間的binding關系
Config.java
package com.example.demo.deadLetter;import java.util.HashMap;import java.util.Map;import org.springframework.amqp.core.Binding;import org.springframework.amqp.core.BindingBuilder;import org.springframework.amqp.core.DirectExchange;import org.springframework.amqp.core.Queue;import org.springframework.context.annotation.Bean;import org.springframework.context.annotation.Configuration;import com.example.demo.Constants.Constants;@Configurationpublic class Config { // 創建一個立即消費隊列 @Bean public Queue immediateQueue() {// 第一個參數是創建的queue的名字，第二個參數是是否支持持久化return new Queue(Constants.IMMEDIATE_QUEUE, true); } // 創建一個延時隊列 @Bean public Queue delayQueue() {Map<String, Object> params = new HashMap<>();// x-dead-letter-exchange 聲明了隊列里的死信轉發到的DLX名稱，params.put('x-dead-letter-exchange', Constants.IMMEDIATE_EXCHANGE);// x-dead-letter-routing-key 聲明了這些死信在轉發時攜帶的 routing-key 名稱。params.put('x-dead-letter-routing-key', Constants.IMMEDIATE_ROUTING_KEY);return new Queue(Constants.DELAY_QUEUE, true, false, false, params); } @Bean public DirectExchange immediateExchange() {// 一共有三種構造方法，可以只傳exchange的名字， 第二種，可以傳exchange名字，是否支持持久化，是否可以自動刪除，//第三種在第二種參數上可以增加Map，Map中可以存放自定義exchange中的參數return new DirectExchange(Constants.IMMEDIATE_EXCHANGE, true, false); } @Bean public DirectExchange deadLetterExchange() {// 一共有三種構造方法，可以只傳exchange的名字， 第二種，可以傳exchange名字，是否支持持久化，是否可以自動刪除，//第三種在第二種參數上可以增加Map，Map中可以存放自定義exchange中的參數return new DirectExchange(Constants.DEAD_LETTER_EXCHANGE, true, false); } @Bean //把立即消費的隊列和立即消費的exchange綁定在一起 public Binding immediateBinding() {return BindingBuilder.bind(immediateQueue()).to(immediateExchange()).with(Constants.IMMEDIATE_ROUTING_KEY); } @Bean //把立即消費的隊列和立即消費的exchange綁定在一起 public Binding delayBinding() {return BindingBuilder.bind(delayQueue()).to(deadLetterExchange()).with(Constants.DELAY_ROUTING_KEY); }}
生產者生產消息
ImmediateSender.java
package com.example.demo.deadLetter;import java.text.SimpleDateFormat;import java.util.Date;import org.springframework.amqp.rabbit.core.RabbitTemplate;import org.springframework.beans.factory.annotation.Autowired;import org.springframework.stereotype.Component;import com.example.demo.Constants.Constants;import com.example.demo.model.Booking;@Componentpublic class ImmediateSender { @Autowired private RabbitTemplate rabbitTemplate; public void send(Booking booking, int delayTime) {System.out.println('delayTime' + delayTime);SimpleDateFormat sdf = new SimpleDateFormat('yyyy-MM-dd HH:mm:ss');this.rabbitTemplate.convertAndSend(Constants.DEAD_LETTER_EXCHANGE, Constants.DELAY_ROUTING_KEY, booking, message -> { message.getMessageProperties().setExpiration(delayTime + ''); System.out.println(sdf.format(new Date()) + ' Delay sent.'); return message;}); }}
消費者消費消息
ImmediateReceiver.java
package com.example.demo.deadLetter;import org.springframework.amqp.rabbit.annotation.EnableRabbit;import org.springframework.amqp.rabbit.annotation.RabbitHandler;import org.springframework.amqp.rabbit.annotation.RabbitListener;import org.springframework.context.annotation.Configuration;import org.springframework.stereotype.Component;import com.example.demo.Constants.Constants;import com.example.demo.model.Booking;@Component@EnableRabbit@Configurationpublic class ImmediateReceiver { @RabbitListener(queues = Constants.IMMEDIATE_QUEUE) @RabbitHandler public void get(Booking booking) {System.out.println('收到延時消息了' + booking); }}
model類book
Book.java
package com.example.demo.model;import java.io.Serializable;import java.util.Date;public class Booking implements Serializable { private static final long serialVersionUID = 1L; private String bookingName; private Date bookingTime; private String bookingContent; private String operatorName; public Booking() { } public String getBookingName() {return bookingName; } public void setBookingName(String bookingName) {this.bookingName = bookingName; } public Date getBookingTime() {return bookingTime; } public void setBookingTime(Date bookingTime) {this.bookingTime = bookingTime; } public String getBookingContent() {return bookingContent; } public void setBookingContent(String bookingContent) {this.bookingContent = bookingContent; } public String getOperatorName() {return operatorName; } public void setOperatorName(String operatorName) {this.operatorName = operatorName; } @Override public String toString() {return super.toString(); }}
測試類
Test.java
package com.example.demo;import java.util.Date;import org.junit.Test;import org.junit.runner.RunWith;import org.springframework.beans.factory.annotation.Autowired;import org.springframework.boot.test.context.SpringBootTest;import org.springframework.test.context.junit4.SpringRunner;import com.example.demo.Immediate.Sender;import com.example.demo.deadLetter.ImmediateSender;import com.example.demo.model.Booking;@RunWith(SpringRunner.class)@SpringBootTestpublic class RabbitMqTestApplicationTests { @Autowired ImmediateSender immediateSender; @Test public void test() { Booking booking = new Booking();booking.setBookingContent('hhaha');booking.setBookingName('預定房子');booking.setBookingTime(new Date());booking.setOperatorName('hellen'); immediateSender.send(booking, 1000); }}
總結第一種方式：經過測試，我們可以發現，當我們先增加一條過期時間大(10000)的A消息進入，之后再增加一個過期時間小的(1000)消息B,并沒有出現想象中的B消息先被消費，A消息后被消費，而是出現了當10000過去的時候，AB消息同時被消費，也就是B消息的消費被阻塞了。
為什么會出現這樣的現象呢？
我們知道利用TTL DLX特性實現的方式，實際上在第一個延時隊列C里面設置了dlx，生產者生產了一條帶ttl的消息放入了延時隊列C中，等到延時時間到了，延時隊列C中的消息變成了死信，根據延時隊列C中設置的dlx的exchange的轉發規則，轉發到了實際消費隊列D中，當該隊列中的監聽器監聽到消息時就會正式開始消費。那么實際上延時隊列中的消息也是放入隊列中的，隊列滿足先進先出，而延時大的消息A還沒出隊，所以B消息也不能順利出隊。
利用Rabbitmq的插件x-delay-message實現為了解決上面的問題，Rabbitmq實現了一個插件x-delay-message來實現延時隊列。
x-delay-message安裝介紹Ubuntu系統下插件安裝方式：選擇rabbitmq_delayed_message_exchange插件，選擇3.6版本，進行下載將安裝包進行解壓
uzip rabbitmq_delayed_message_exchange-20171215-3.6.x.zip
將插件移到rabbitmq安裝的路徑
sudo cp -r rabbitmq_delayed_message_exchange-20171215-3.6.x.ez /usr/lib/rabbitmq/lib/rabbitmq_server-3.6.15/plugins
Enable插件
rabbitmq-plugins enable rabbitmq_delayed_message_exchange
windows同理
Springboot集成rabbitmq實現第二種方式XdelayConfig.java
package com.example.demo.Xdelay;import java.util.HashMap;import java.util.Map;import org.springframework.amqp.core.Binding;import org.springframework.amqp.core.BindingBuilder;import org.springframework.amqp.core.CustomExchange;import org.springframework.amqp.core.Queue;import org.springframework.context.annotation.Bean;import org.springframework.context.annotation.Configuration;import com.example.demo.Constants.Constants;@Configurationpublic class XdelayConfig { // 創建一個立即消費隊列 @Bean public Queue immediateQueue() {// 第一個參數是創建的queue的名字，第二個參數是是否支持持久化return new Queue(Constants.IMMEDIATE_QUEUE_XDELAY, true); } @Bean public CustomExchange delayExchange() {Map<String, Object> args = new HashMap<String, Object>();args.put('x-delayed-type', 'direct');return new CustomExchange(Constants.DELAYED_EXCHANGE_XDELAY, 'x-delayed-message', true, false, args); } @Bean public Binding bindingNotify() {return BindingBuilder.bind(immediateQueue()).to(delayExchange()).with(Constants.DELAY_ROUTING_KEY_XDELAY).noargs(); }}
XdelaySender.java
package com.example.demo.Xdelay;import java.text.SimpleDateFormat;import java.util.Date;import org.springframework.amqp.AmqpException;import org.springframework.amqp.core.Message;import org.springframework.amqp.core.MessagePostProcessor;import org.springframework.amqp.rabbit.core.RabbitTemplate;import org.springframework.beans.factory.annotation.Autowired;import org.springframework.stereotype.Service;import com.example.demo.Constants.Constants;import com.example.demo.model.Booking;@Servicepublic class XdelaySender { @Autowired private RabbitTemplate rabbitTemplate; public void send(Booking booking, int delayTime) {System.out.println('delayTime' + delayTime);SimpleDateFormat sdf = new SimpleDateFormat('yyyy-MM-dd HH:mm:ss');this.rabbitTemplate.convertAndSend(Constants.DELAYED_EXCHANGE_XDELAY, Constants.DELAY_ROUTING_KEY_XDELAY, booking, new MessagePostProcessor() { @Override public Message postProcessMessage(Message message) throws AmqpException {message.getMessageProperties().setDelay(delayTime);System.out.println(sdf.format(new Date()) + ' Delay sent.');return message; }}); }}
XdelayReceiver.java
package com.example.demo.Xdelay;import org.springframework.amqp.rabbit.annotation.EnableRabbit;import org.springframework.amqp.rabbit.annotation.RabbitListener;import org.springframework.context.annotation.Configuration;import org.springframework.stereotype.Component;import com.example.demo.Constants.Constants;import com.example.demo.model.Booking;@Component@EnableRabbit@Configurationpublic class XdelayReceiver { @RabbitListener(queues = Constants.IMMEDIATE_QUEUE_XDELAY) public void get(Booking booking) {System.out.println('Receive' + booking); }}
Test.java
package com.example.demo;import java.util.Date;import org.junit.Test;import org.junit.runner.RunWith;import org.springframework.beans.factory.annotation.Autowired;import org.springframework.boot.test.context.SpringBootTest;import org.springframework.test.context.junit4.SpringRunner;import com.example.demo.Xdelay.XdelaySender;import com.example.demo.model.Booking;@RunWith(SpringRunner.class)@SpringBootTestpublic class RabbitMqTestApplicationTests { @Autowired XdelaySender xdelaySender; @Test public void test11() { Booking booking = new Booking();booking.setBookingContent('hhaha');booking.setBookingName('預定房子');booking.setBookingTime(new Date());booking.setOperatorName('hellen');xdelaySender.send(booking, 2000); }}
到此這篇關于Springboot+rabbitmq實現延時隊列的兩種方式的文章就介紹到這了,更多相關Springboot rabbitmq延時隊列內容請搜索好吧啦網以前的文章或繼續瀏覽下面的相關文章希望大家以后多多支持好吧啦網！
相關文章：
網公網安備