【转载】消息队列RabbitMQ入门介绍

简介:

(一)基本概念

      RabbitMQ 是流行的开源消息队列系统,用 erlang 语言开发。我曾经对这门语言挺有兴趣,学过一段时间,后来没坚持。RabbitMQ 是 AMQP(高级消息队列协议)的标准实现。如果不熟悉 AMQP,直接看 RabbitMQ 的文档会比较困难。不过它也只有几个关键概念,这里简单介绍。

RabbitMQ 的结构图如下:


几个概念说明:

Broker:简单来说就是消息队列服务器实体。
Exchange:消息交换机,它指定消息按什么规则,路由到哪个队列。
Queue:消息队列载体,每个消息都会被投入到一个或多个队列。
Binding:绑定,它的作用就是把 exchange 和 queue 按照路由规则绑定起来。
Routing Key:路由关键字,exchange 根据这个关键字进行消息投递。
vhost:虚拟主机,一个 broker 里可以开设多个 vhost,用作不同用户的权限分离。
producer:消息生产者,就是投递消息的程序。
consumer:消息消费者,就是接受消息的程序。
channel:消息通道,在客户端的每个连接里,可建立多个 channel,每个 channel 代表一个会话任务。

消息队列的使用过程大概如下:

(1)客户端连接到消息队列服务器,打开一个 channel 。
(2)客户端声明一个 exchange,并设置相关属性。
(3)客户端声明一个 queue,并设置相关属性。
(4)客户端使用 routing key(本质上是 binding key,后文已做相应纠正),在 exchange 和 queue 之间建立好绑定关系。
(5)客户端投递消息到 exchange 。

      exchange 接收到消息后,就根据消息的 routing key 和已经设置的 binding 关系,进行消息路由,将消息投递到一个或多个队列里。

      exchange 也有几个类型:

  • 完全根据 routing key 进行投递的叫做 direct 交换机。例如,绑定时设置了 binding key 为 "abc",那么客户端提交的消息,只有设置了routing key 为 "abc" 的才会被投递到该队列。
  • 对 routing key 进行模式匹配后进行投递的叫做 topic 交换机。符号 "#" 匹配一个或多个词,符号 "*" 匹配正好一个词。例如 "abc.#" 可以匹配 "abc.def.ghi" ,"abc.*" 只能匹配 "abc.def" 。
  • 还有一种不需要 routing key 的,叫做 fanout 交换机。它采取广播模式,一个消息进来时,投递到与该交换机绑定的所有队列。


      RabbitMQ 支持消息的持久化,也就是数据写在磁盘上,为了数据安全考虑,我想大多数用户都会选择持久化。消息队列持久化包括 3 个部分:
(1)exchange 持久化,在声明时指定 durable => 1
(2)queue 持久化,在声明时指定 durable => 1
(3)消息持久化,在投递时指定 delivery_mode => 2(1 是非持久化)

      如果 exchange 和 queue 都是持久化的,那么它们之间的 binding 也是持久化的。


(二)应用实际

使用 Linux 服务器(ubuntu 9.10 64位),安装 RabbitMQ 非常方便。

先运行如下命令安装 erlang:

?
1
# apt-get install erlang-nox

再到rabbitmq.com上下载RabbitMQ的安装包,如下安装:

?
1
# dpkg -i rabbitmq-server_2.6.1-1_all.deb

安装完后,使用

?
1
# /etc/init.d/rabbitmq-server start|stop|restart


来启动、停止、重启 rabbitmq。

在正式应用之前,我们先在 RabbitMQ 里创建一个 vhost ,加一个用户,并设置该用户的权限。

使用 rabbitmqctl 客户端工具,在根目录下创建 "/pyhtest" 这个 vhost :

?
1
# rabbitmqctl add_vhost /pyhtest

创建一个用户名 "pyh" ,设置密码 "pyh1234" :

?
1
# rabbitmqctl add_user pyh pyh1234

设置pyh用户对/pyhtest这个vhost拥有全部权限:

?
1
# rabbitmqctl set_permissions -p /pyhtest pyh “.*” “.*” “.*”

后面三个”*”代表pyh用户拥有对/pyhtest的配置、写、读全部权限

设置好后,开始编程,我用 Perl 写一个消息投递程序(producer):

?
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
#!/usr/bin/perl
use strict;
use Net::RabbitMQ;
use UUID::Tiny;
 
my $channel = 1000; # channel ID,可以随意指定,只要不冲突
my $queuename = “pyh_queue”; # 队列名
my $exchange = “pyh_exchange”; # 交换机名
my $routing_key = “test”; # routing key
 
my $mq = Net::RabbitMQ->new(); # 创建一个RabbitMQ对象
 
$mq -> connect (“localhost”, { vhost => “/pyhtest”, user => “pyh”, password => “pyh1234″ }); # 建立连接
$mq ->channel_open( $channel ); # 打开一个channel
$mq ->exchange_declare( $channel , $exchange , { durable => 1}); # 声明一个持久化的交换机
$mq ->queue_declare( $channel , $queuename , { durable => 1}); # 声明一个持久化的队列
$mq ->queue_bind( $channel , $queuename , $exchange , $routing_key ); # 使用routing key在交换机和队列间建立绑定
 
for ( my $i =0; $i <10000000; $i ++) { # 循环1000万次
my $string = create_UUID_as_string(UUID_V1); # 产生一条UUID作为消息主体
$mq ->publish( $channel , $routing_key , $string , { exchange => $exchange }, { delivery_mode => 2 }); # 将消息结合key以持久化模式投递到交换机
}
 
$mq ->disconnect(); # 断开连接

消息接受程序(consumer)大概如下:

?
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
#!/usr/bin/perl
use strict;
use Net::RabbitMQ;
 
my $channel = 1001;
my $queuename = “pyh_queue”;
my $mq = Net::RabbitMQ->new();
 
$mq -> connect (“localhost”, { vhost =>”/pyhtest”, user => “pyh”, password => “pyh1234″ });
$mq ->channel_open( $channel );
 
while (1) {
my $hashref = $mq ->get( $channel , $queuename );
last unless defined $hashref ;
print $hashref ->{message_count}, “: “, $hashref ->{body},”\n”;
}
 
$mq ->disconnect();

consumer 连接后只要指定队列就可获取到消息。

      上述程序共投递 1000 万条消息,每条消息 36 字节(UUID),打开持久化,共耗时 17 分多钟(包括产生 UUID 的时间),每秒投递消息约 9500 条。测试机器是 8G 内存、8 核志强 CPU 。

     投递完后,在 /var/lib/rabbitmq/mnesia/rabbit@${hostname}/msg_store_persistent 目录,产生 2G 多的持久化消息数据。在运行 consumer 程序后,这些数据都会消失,因为消息已经被消费了。


相关实践学习
快速体验阿里云云消息队列RocketMQ版
本实验将带您快速体验使用云消息队列RocketMQ版Serverless系列实例进行获取接入点、创建Topic、创建订阅组、收发消息、查看消息轨迹和仪表盘。
消息队列 MNS 入门课程
1、消息队列MNS简介 本节课介绍消息队列的MNS的基础概念 2、消息队列MNS特性 本节课介绍消息队列的MNS的主要特性 3、MNS的最佳实践及场景应用 本节课介绍消息队列的MNS的最佳实践及场景应用案例 4、手把手系列:消息队列MNS实操讲 本节课介绍消息队列的MNS的实际操作演示 5、动手实验:基于MNS,0基础轻松构建 Web Client 本节课带您一起基于MNS,0基础轻松构建 Web Client
目录
相关文章
|
7月前
|
消息中间件 数据管理 Serverless
阿里云消息队列 Apache RocketMQ 创新论文入选顶会 ACM FSE 2025
阿里云消息团队基于 Apache RocketMQ 构建 Serverless 消息系统,适配多种主流消息协议(如 RabbitMQ、MQTT 和 Kafka),成功解决了传统中间件在可伸缩性、成本及元数据管理等方面的难题,并据此实现 ApsaraMQ 全系列产品 Serverless 化,助力企业提效降本。
|
5月前
|
消息中间件 Java Kafka
消息队列比较:Spring 微服务中的 Kafka 与 RabbitMQ
本文深入解析了 Kafka 和 RabbitMQ 两大主流消息队列在 Spring 微服务中的应用与对比。内容涵盖消息队列的基本原理、Kafka 与 RabbitMQ 的核心概念、各自优势及典型用例,并结合 Spring 生态的集成方式,帮助开发者根据实际需求选择合适的消息中间件,提升系统解耦、可扩展性与可靠性。
392 1
消息队列比较:Spring 微服务中的 Kafka 与 RabbitMQ
|
消息中间件 JSON Java
开发者如何使用轻量消息队列MNS
【10月更文挑战第19天】开发者如何使用轻量消息队列MNS
971 90
|
消息中间件 安全 Java
云消息队列RabbitMQ实践解决方案评测
一文带你详细了解云消息队列RabbitMQ实践的解决方案优与劣
455 88
|
消息中间件 存储 Kafka
MQ 消息队列核心原理,12 条最全面总结!
本文总结了消息队列的12个核心原理,涵盖消息顺序性、ACK机制、持久化及高可用性等内容。关注【mikechen的互联网架构】,10年+BAT架构经验倾囊相授。
|
消息中间件
解决方案 | 云消息队列RabbitMQ实践获奖名单公布!
云消息队列RabbitMQ实践获奖名单公布!
232 1
|
消息中间件 存储 弹性计算
云消息队列RabbitMQ实践
云消息队列RabbitMQ实践
|
消息中间件 C语言 RocketMQ
消息队列 MQ操作报错合集之出现"Connection reset by peer"的错误,该如何处理
消息队列(MQ)是一种用于异步通信和解耦的应用程序间消息传递的服务,广泛应用于分布式系统中。针对不同的MQ产品,如阿里云的RocketMQ、RabbitMQ等,它们在实现上述场景时可能会有不同的特性和优势,比如RocketMQ强调高吞吐量、低延迟和高可用性,适合大规模分布式系统;而RabbitMQ则以其灵活的路由规则和丰富的协议支持受到青睐。下面是一些常见的消息队列MQ产品的使用场景合集,这些场景涵盖了多种行业和业务需求。
|
消息中间件 运维 监控
云消息队列RabbitMQ实践解决方案评测报告
本报告旨在对《云消息队列RabbitMQ实践》解决方案进行综合评测。通过对该方案的原理理解、部署体验、设计验证以及实际应用价值等方面进行全面分析,为用户提供详尽的反馈与建议。
325 16

相关产品

  • 云消息队列 MQ