动力节点RabbitMQ笔记一7-11RabbitMQ工作模型

7. RabbitMQ工作模型


broker 相当于mysql服务器,virtual host相当于数据库(可以有多个数据库)
queue相当于表,消息相当于记录。
 
消息队列有三个核心要素: 消息生产者消息队列消息消费者
生产者(Producer):发送消息的应用;(java程序,也可能是别的语言写的程序)
消费者(Consumer):接收消息的应用;(java程序,也可能是别的语言写的程序)
代理(Broker):就是消息服务器,RabbitMQ Server就是Message Broker;
连接(Connection):连接RabbitMQ服务器的TCP长连接;
信道(Channel):连接中的一个虚拟通道,消息队列发送或者接收消息时,都是通过信道进行的;
虚拟主机(Virtual host):一个虚拟分组,在代码中就是一个字符串,当多个不同的用户使用同一个RabbitMQ服务时,可以划分出多个Virtual host,每个用户在自己的Virtual host创建exchange/queue等;(分类比较清晰、相互隔离)
交换机(Exchange):交换机负责从生产者接收消息,并根据交换机类型分发到对应的消息队列中,起到一个路由的作用;
路由键(Routing Key):交换机根据路由键来决定消息分发到哪个队列,路由键是消息的目的地址;
绑定(Binding):绑定是队列和交换机的一个关联连接(关联关系);
队列(Queue):存储消息的缓存;
消息(Message):由生产者通过RabbitMQ发送给消费者的信息;(消息可以任何数据,字符串、user对象,json串等等)

8. RabbitMQ交换机类型

Exchange(X) 可翻译成交换机/交换器/路由器

8.1 RabbitMQ交换器 (Exchange)类型

| 1、Fanout Exchange(扇形)
2、Direct Exchange(直连)
3、Topic Exchange(主题)

4、Headers Exchange(头部)

8.2 Fanout Exchange

8.2.1 介绍

Fanout 扇形的,散开的; 扇形交换机
投递到所有绑定的队列,不需要路由键,不需要进行路由键的匹配,相当于广播、群发;

8.2.2 示例

8.3 Direct Exchange

8.3.1 介绍

根据路由键精确匹配(一模一样)进行路由消息队列;

8.3.2 示例

8.4 Topic Exchange

8.4.1 介绍

通配符匹配,相当于模糊匹配;
#匹配多个单词,用来表示任意数量(零个或多个)单词
匹配一个单词(必须有一个,而且只有一个),用.隔开的为一个单词:
beijing.# == beijing.queue.abc, beijing.queue.xyz.xxx
beijing.
== beijing.queue, beijing.xyz

发送时指定的路由键:lazy.orange.rabbit

8.4.2 示例

** **

8.5 Headers Exchange (用的比较少)

8.5.1 介绍

基于消息内容中的headers属性进行匹配;

8.5.2 示例

绑定参考代码:

Map<String, Object> headerValues = new HashMap<>();headerValues.put(“type”, “m”);headerValues.put(“status”, 1);return BindingBuilder.bind(queueA).to(headersExchange).whereAll(headerValues).match();

发送参考代码

MessageProperties messageProperties = new MessageProperties();        messageProperties.setHeader(“type”, “m”);        messageProperties.setHeader(“status”, 1);        Message message = new Message(msg.getBytes(), messageProperties);//        void convertAndSend(String exchange, String routingKey, Object message) throws AmqpException;        amqpTemplate.convertAndSend(RabbitConfig.EXCHANGE, null, message);

学习它的目的是:发消息时可以指定消息属性(MessageProperties)

9. RabbitMQ过期消息

过期消息也叫TTL消息,TTL:Time To Live
消息的过期时间有两种设置方式:(过期消息)

9.1 设置单条消息的过期时间

参考代码

MessageProperties messageProperties = new MessageProperties();messageProperties.setExpiration(“15000”); // 设置过期时间,单位:毫秒_Message message = new Message(json.getBytes(), messageProperties);//发送消息_amqpTemplate.convertAndSend(RabbitConfig.DIRECT_EXCHANGE, RabbitConfig.DIRECT_ROUTINGKEY, message);System.out.println(“发送完毕:” + new Date());单条消息的过期时间决定了在没有任何消费者消费时,消息可以存活多久;

9.2 通过队列属性设置消息过期时间

@Beanpublic Queue directQueue() {    Map<String, Object> arguments = new HashMap<>();    arguments.put(“x-message-ttl”, 10000);    return new Queue(DIRECT_QUEUE, true, false, false, arguments);}

队列的过期时间决定了在没有任何消费者的情况下,队列中的消息可以存活多久;
注意事项:
如果消息和对列都设置过期时间,则消息的TTL以两者之间较小的那个数值为准。

10.   RabbitMQ死信队列

也有叫 死信交换机、死信邮箱等说法;
DLX: Dead-Letter-Exchange 死信交换器,死信邮箱

如下情况下一个消息会进入DLX(Dead Letter Exchange)死信交换机。

10.1 消息过期

参考代码

MessageProperties messageProperties=new MessageProperties();//设置此条消息的过期时间为10秒messageProperties.setExpiration(“10000”);

10.2 队列过期

参考代码

Map<String, Object> arguments =new HashMap<>(); //指定死信交换机,通过x-dead-letter-exchange 来设置 arguments.put(“x-dead-letter-exchange”,EXCHANGE_DLX); //设置死信路由key,value 为死信交换机和死信队列绑定的key,要一模一样,因为死信交换机是直连交换机 arguments.put(“x-dead-letter-routing-key”,BINDING_DLX_KEY); //队列的过期时间 arguments.put(“x-message-ttl”,10000);return  new Queue(QUEUE_NORMAL,true,false,false,arguments);

TTL: Time to Live的简称,过期时间

10.3 队列达到最大长度(先入队的消息会被发送到DLX)

| Map<String, Object> arguments = new HashMap<String, Object>();
//设置队列的最大长度 ,对头的消息会被挤出变成死信

arguments.put(“x-max-length”, 5);

10.4 消费者拒绝消息不进行重新投递

从正常的队列接收消息,但是对消息不进行确认,并且不对消息进行重新投递,此时消息就进入死信队列。
application.yml 启动手动确认

spring:  rabbitmq:    listener:      simple:        acknowledge-mode: manual

参考代码

|  /**
     * 监听正常的那个队列的名字,不是监听那个死信队列
     * 我们从正常的队列接收消息,但是对消息不进行确认,并且不对消息进行重新投递,此时消息就进入死信队列
     *
     * channel 消息信道(是连接下的一个消息信道,一个连接下有多个消息信息,发消息/接消息都是通过信道完成的)
     */
    @RabbitListener(queues = {RabbitConfig.QUEUE})
    public void process(Message message, Channel channel) {
        System.out.println(“接收到的消息:” + message);
        //对消息不确认, ack单词是 确认 的意思
        // void basicNack(long deliveryTag, boolean multiple, boolean requeue)
        // deliveryTag:消息的一个数字标签
        // multiple:翻译成中文是多个的意思,如果是true表示对小于deliveryTag标签下的消息都进行Nack不确认,false表示只对当前deliveryTag标签的消息Nack
        // requeue:如果是true表示消息被Nack后,重新发送到队列,如果是false,消息被Nack后,不会重新发送到队列
        try {
            System.out.println("deliveryTag = " + message.getMessageProperties().getDeliveryTag());
            //要开启rabbitm消息消费的手动确认模式,然后才这么写代码;
            channel.basicNack(message.getMessageProperties().getDeliveryTag(), false, false);
        } catch (IOException e) {
            e.printStackTrace();
        }

}

10.5 消费者拒绝消息

开启手动确认模式,并拒绝消息,不重新投递,则进入死信队列
参考代码:

|     /**
     * 监听正常的那个队列的名字,不是监听那个死信队列
     * 我们从正常的队列接收消息,但是对消息不进行确认,并且不对消息进行重新投递,此时消息就进入死信队列
     *
     * channel 消息信道(是连接下的一个消息信道,一个连接下有多个消息信息,发消息/接消息都是通过信道完成的)
     */
    @RabbitListener(queues = {RabbitConfig.QUEUE})
    public void process(Message message, Channel channel) {
        System.out.println(“接收到的消息:” + message);
        //对消息不确认, ack单词是 确认 的意思
        // void basicNack(long deliveryTag, boolean multiple, boolean requeue)
        // deliveryTag:消息的一个数字标签
        // multiple:翻译成中文是多个的意思,如果是true表示对小于deliveryTag标签下的消息都进行Nack不确认,false表示只对当前deliveryTag标签的消息Nack
        // requeue:如果是true表示消息被Nack后,重新发送到队列,如果是false,消息被Nack后,不会重新发送到队列
        try {
            System.out.println("deliveryTag = " + message.getMessageProperties().getDeliveryTag());
            //要开启rabbitm消息消费的手动确认模式,然后才这么写代码;
            channel.basicReject(message.getMessageProperties().getDeliveryTag(), false);
        } catch (IOException e) {
            e.printStackTrace();
        }
    }

}

11.   RabbitMQ延迟队列

场景:有一个订单,15分钟内如果不支付,就把该订单设置为交易关闭,那么就不能支付了,这类实现延迟任务的场景就可以采用延迟队列来实现,当然除了延迟队列来实现,也可以有一些其他办法实现;

11.1 定时任务方式

每隔3秒扫描一次数据库,查询过期的订单然后进行处理;
优点:
简单,容易实现;
缺点:
1、存在延迟(延迟时间不准确),如果你每隔1分钟扫一次,那么就有可能延迟1分钟;
2、性能较差,每次扫描数据库,如果订单量很大
 
1.  被动取消
当用户查询订单的时候,判断订单是否超时,超时了就取消(交易关闭);
优点:
对服务器而言,压力小;
缺点:
1、用户不查询订单,将永远处于待支付状态,会对数据统计等功能造成影响;
2、用户打开订单页面,有可能比较慢,因为要处理大量订单,用户体验少稍差;

11.2 JDK延迟队列(单体应用,不能分布式下)

DelayedQueue
无界阻塞队列,该队列只有在延迟期满的时候才能从中获取元素    
优点:
实现简单,任务延迟低;
缺点:
服务重启、宕机,数据丢失;
只适合单机版,不适合集群;
订单量大,可能内存不足而发生异常; oom

11.3 采用消息中间件(rabbitmq)

1、RabbitMQ本身不支持延迟队列,可以使用TTL结合DLX的方式来实现消息的延迟投递,即把DLX跟某个队列绑定,到了指定时间,消息过期后,就会从DLX路由到这个队列,消费者可以从这个队列取走消息。

代码:正常延迟
//问题? 如果先发送的消息,消息延迟时间长,会影响后面的 延迟时间段的消息的消费;
//解决:不同延迟时间的消息要发到不同的队列上,同一个队列的消息,它的延迟时间应该一样

代码 延迟问题

11.4 使用rabbitmq-delayed-message-exchange 延迟插件

11.4.1 下载

选择对应的版本下载 rabbitmq-delayed-message-exchange 插件,下载地址:http://www.rabbitmq.com/community-plugins.html


2、插件拷贝到 RabbitMQ 服务器plugins目录下

11.4.2 解压

unzip rabbitmq_delayed_message_exchange-3.10.2.ez

如果unzip 没有安装,先安装一下

yum install unzip -y

11.4.3 启用插件

./rabbitmq-plugins enable rabbitmq_delayed_message_exchange 开启插件;

11.4.4 查询安装情况

./rabbitmq-plugins list 查询安装的所有插件;
重启rabbitmq使其生效;(此处也可以不重启)

消息发送后不会直接投递到队列,
而是存储到 Mnesia(嵌入式数据库),检查 x-delay 时间(消息头部);
延迟插件在 RabbitMQ 3.5.7 及以上的版本才支持,依赖 Erlang/OPT 18.0 及以上运行环境;
Mnesia 是一个小型数据库,不适合于大量延迟消息的实现
解决了消息过期时间不一致出现的问题。
参考代码:

@Component@Slf4jpublic class RabbitConfig {    public static final String _EXCHANGE _= “exchange:plugin”;    public static final String _QUEUE _= “queue.plugin”;    public static final String _KEY _= “plugin”;        @Bean    public CustomExchange customExchange() {        Map<String, Object> arguments = new HashMap<>();        arguments.put(“x-delayed-type”, “direct”);        // CustomExchange(String name, String type, boolean durable, boolean autoDelete, Map<String, Object> arguments)        return new CustomExchange(EXCHANGE, “x-delayed-message”, true, false, arguments);    }     @Bean    public Queue queue() {        return QueueBuilder.durable(QUEUE).build();    }     @Bean    public Binding binding(CustomExchange customExchange, Queue queue) {        return BindingBuilder.bind(queue).to(customExchange).with(KEY).noargs();    }}

发消息参考代码

MessageProperties messageProperties=new MessageProperties();messageProperties.setHeader(“x-delay”,16000);String msg = “hello world”;Message message=new Message(msg.getBytes(),messageProperties);rabbitTemplate.convertAndSend(RabbitConfig.EXCHANGE, “plugin”, message);log.info(“发送完毕,发送时间为:{}”,new Date());

猜你喜欢

转载自blog.csdn.net/Javanewspaper/article/details/130384856