spring cloud之RabbitMQ简单介绍
RabbitMQ:是spring cloud支持的一种消息中间件,消息中间件有很多,主要所用就是:解耦服务之间的消息关系,将同步变异步,流量削锋。
解耦服务之间的消息关系:例如:发邮件,在一个商城服务中购买商品后需要发送邮件给购买者,则需要请求邮件服务,此时是商城服务直接请求邮件服务,而有了MQ后,则是商城服务将消息发送到MQ服务器中,此时由MQ服务器将消息转给邮件服务。
将同步变异步:商城中只管将消息发送给MQ服务器即可执行自己的逻辑,不在需要专门去请求其他服务。
流量削锋:例如:在某一时间段内有大批量邮件需要发送,此时如果商城服务直接调用邮件服务,则邮件服务很有可能挂掉,因为邮件服务接受的请求可不止商城服务。如果此时用MQ则会没有这方面的影响。
RabbitMQ发送消息的方式取决于它的交换器:它有3种交换器:RabbitMQ中的消息队列完全是由消费者创建。它会根绝消费者监听的一些属性去创建队列,如:
@Component
@RabbitListener(
bindings=@QueueBinding(
value=@Queue(value=“${mq.config.queue.info}” //消息队列名称
,autoDelete=”true”), //是否在消费者服务关闭后清除此队列,如果改为false的话,在消费者关闭重启这段时间内消息在消费者重新连接上以后都会发送,为true的话这段时间的消息将被丢弃。
exchange=@Exchange(value=“${mq.config.exchange}” //交换器名称
,type=ExchangeTypes.TOPIC), //交换器类型
key=“*.log.info” //路由键,此处在 *log.info中有一个 * 号,表示模糊匹配,只要后缀对了就可以
)
)
路由键:用于连接RabbitMQ中的消息队列的键。就相当于Map中的key一样,value就是消息队列。
1.Direct 交换器(阅 发布与订阅 完全匹配):发送者需要提供:交换器名称,路由键完全匹配,消息。
2.Topic 交换器( 主题,规则匹配):交换器名称,路由键名称,消息
3 Fanout 交换器(广播):交换器名称,””,消息
RabbitMQ名词表:
1.Message
消息。消息是不具名的,它由消息头消息体组成。消息体是不透明的,而消息头则由
一系列可选属性组成,这些属性包括:routing-key(路由键)、priority(相对于其他消息的优先
权)、delivery-mode(指出消息可能持久性存储)等。
2.Publisher
消息的生产者。也是一个向交换器发布消息的客户端应用程序。
3.Consumer
消息的消费者。表示一个从消息队列中取得消息的客户端应用程序。
4.Exchange
交换器。用来接收生产者发送的消息并将这些消息路由给服务器中的队列。
三种常用的交换器类型
1. direct(发布与订阅 完全匹配)
2. fanout(广播)
3. topic(主题,规则匹配)
5.Binding
绑定。用于消息队列和交换器之间的关联。一个绑定就是基于路由键将交换器和消息
队列连接起来的路由规则,所以可以将交换器理解成一个由绑定构成的路由表。
6.Queue
消息队列。用来保存消息直到发送给消费者。它是消息的容器,也是消息的终点。一
个消息可投入一个或多个队列。消息一直在队列里面,等待消费者链接到这个队列将其取
走。
7.Routing-key
路由键。RabbitMQ 决定消息该投递到哪个队列的规则。
队列通过路由键绑定到交换器。
消息发送到 MQ 服务器时,消息将拥有一个路由键,即便是空的,RabbitMQ 也会将其
和绑定使用的路由键进行匹配。
如果相匹配,消息将会投递到该队列。
如果不匹配,消息将会进入黑洞。
8.Connection
链接。指 rabbit 服务器和服务建立的 TCP 链接。
9.Channel
信道。
1,Channel 中文叫做信道,是 TCP 里面的虚拟链接。例如:电缆相当于 TCP,信道是
一个独立光纤束,一条 TCP 连接上创建多条信道是没有问题的。
2,TCP 一旦打开,就会创建 AMQP 信道。
3,无论是发布消息、接收消息、订阅队列,这些动作都是通过信道完成的。
10.Virtual Host
虚拟主机。表示一批交换器,消息队列和相关对象。虚拟主机是共享相同的身份认证
和加密环境的独立服务器域。每个 vhost 本质上就是一个 mini 版的 RabbitMQ 服务器,拥有
自己的队列、交换器、绑定和权限机制。vhost 是 AMQP 概念的基础,必须在链接时指定,
RabbitMQ 默认的 vhost 是/
11.Borker
表示消息队列服务器实体。
交换器和队列的关系
交换器是通过路由键和队列绑定在一起的,如果消息拥有的路由键跟队列和交换器的
路由键匹配,那么消息就会被路由到该绑定的队列中。
也就是说,消息到队列的过程中,消息首先会经过交换器,接下来交换器在通过路由
键匹配分发消息到具体的队列中。
路由键可以理解为匹配的规则。
RabbitMQ 为什么需要信道?为什么不是 TCP 直接通信?
1. TCP 的创建和销毁开销特别大。创建需要 3 次握手,销毁需要 4 次分手。
2. 如果不用信道,那应用程序就会以 TCP 链接 Rabbit,高峰时每秒成千上万条链接
会造成资源巨大的浪费,而且操作系统每秒处理 TCP 链接数也是有限制的,必定造成性能
瓶颈。
3. 信道的原理是一条线程一条通道,多条线程多条通道同用一条 TCP 链接。一条 TCP
链接可以容纳无限的信道,即使每秒成千上万的请求也不会成为性能的瓶颈。
MQ适用场景:如发送邮件,消息推送,发送短信等业务。
1 安装 Erlang
1.1 什么是 Erlang
Erlang([‘ə:læŋ])是一种通用的面向并发的编程语言,它由瑞典电信设备制造商爱立信所辖的
CS-Lab 开发,目的是创造一种可以应对大规模并发活动的编程语言和运行环境
系统版本:CentOS 6.5
RabbitMQ -Server :3.5.1
2 安装 erlang
2.1 安装准备,下载安装文件
wget
https://packages.erlang-solutions.com/erlang-solutions-1.0-1.noarch.r
pm
rpm -Uvh erlang-solutions-1.0-1.noarch.rpm
修改 primary.xml.gz 的 的 sha 的加密值
cd /var/cache/yum/x86_64/6/erlang-solutions
sha1sum primary.xml.gz
vim repomd.xml
修改
<data type=”primary”>
<checksum type=”sha”> 结果为 sha1sum 命令结果</checksum>
3 安装 erlang
yum install erlang
4 安装完成后可以用 erl 命令查看是否安装成功
erl -version
5 安装 RabbitMQ Server
5.1 安装准备,下载 RabbitMQ Server
wget
http://www.rabbitmq.com/releases/rabbitmq-server/v3.5.1/rabbitmq-
server-3.5.1-1.noarch.rpm
5.2 安装 RabbitMQ Server
rpm –import
http://www.rabbitmq.com/rabbitmq-signing-key-public.asc
yum install rabbitmq-server-3.5.1-1.noarch.rpm
6 启动 RabbitMQ
6.1 配置为守护进程随系统自动启动,root 权限下执行:
chkconfig rabbitmq-server on
6.2 启动 rabbitMQ 服务
/sbin/service rabbitmq-server start
7 安装 Web 管理界面插件
7.1 安装命令
rabbitmq-plugins enable rabbitmq_management
7.2 安装成功后会显示如下内容
The following plugins have been enabled:
mochiweb
webmachine
rabbitmq_web_dispatch
amqp_client
rabbitmq_management_agent
rabbitmq_management
Plugin configuration has changed. Restart RabbitMQ for changes
to take effect.
8 设置 RabbitMQ 远程 ip 登录
这里我们以创建个 oldlu 帐号,密码 123456 为例,创建一个账号并
支持远程 ip 访问。
8.1 创建账号
rabbitmqctl add_user oldlu 123456
8.2 设置用户角色
rabbitmqctl set_user_tags oldlu administrator
8.3 设置用户权限
rabbitmqctl set_permissions -p “/” oldlu “.*” “.*” “.*”
8.4 设置完成后可以查看当前用户和角色( 需要开启服务)
rabbitmqctl list_users
浏览器输入 :serverip:15672 。 其中 serverip 是 是 RabbitMQ-Server 所
在主机的 ip
开始编码:此次演示的是:Topic交换器
Consumer消费者:以前被调用的服务,相当于邮件服务
1.在spring boot pom文件
<?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd"> <modelVersion>4.0.0</modelVersion> <groupId>cn.mr.li</groupId> <artifactId>rabbitmq-durable-direct-consumer</artifactId> <version>0.0.1-SNAPSHOT</version> <packaging>jar</packaging> <name>rabbitmq-durable-direct-consumer</name> <description>Demo project for Spring Boot</description> <parent> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-parent</artifactId> <version>1.5.13.RELEASE</version> <relativePath /> <!-- lookup parent from repository --> </parent> <properties> <project.build.sourceEncoding>UTF-8</project.build.sourceEncoding> <project.reporting.outputEncoding>UTF-8</project.reporting.outputEncoding> <java.version>1.8</java.version> </properties> <dependencies> <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-web</artifactId> </dependency> <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-test</artifactId> <scope>test</scope> </dependency> <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-amqp</artifactId> </dependency> </dependencies> <build> <plugins> <plugin> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-maven-plugin</artifactId> </plugin> </plugins> </build> </project>
2.在全局配置文件,application.protorties中添加一下配置,用于连接RabbitMQ服务器
spring.application.name=springcloud-mq
spring.rabbitmq.host=192.168.70.131
spring.rabbitmq.port=5672
spring.rabbitmq.username=oldlu
spring.rabbitmq.password=123456
#设置交换器的名称
mq.config.exchange=log.topic
#info 队列名称
mq.config.queue.info=log.info
#error 队列名称
mq.config.queue.error=log.error
#log 队列名称
mq.config.queue.logs=log.all
#开启重试 ACK机制:如果失败则永久性重新发送会死循环,这里给他配置了可以循环发送,但只能发送5次,5次过后就将此次要发送的消息丢弃掉。
spring.rabbitmq.listener.retry.enabled=true
#重试次数,默认为 3 次
spring.rabbitmq.listener.retry.max-attempts=5
3.消费者info代码
/** * 消息接收者 * @author Administrator * @RabbitListener bindings:绑定队列 * @QueueBinding value:绑定队列的名称 * exchange:配置交换器 * * @Queue value:配置队列名称 * autoDelete:是否是一个可删除的临时队列 * * @Exchange value:为交换器起个名称 * type:指定具体的交换器类型 */ @Component @RabbitListener( bindings=@QueueBinding( value=@Queue(value="${mq.config.queue.info}",autoDelete="tr ue"), exchange=@Exchange(value="${mq.config.exchange}",type=Excha ngeTypes.TOPIC), key="*.log.info" ) ) public class InfoReceiver { /** * 接收消息的方法。采用消息队列监听机制 * @param msg */ @RabbitHandler public void process(String msg){ System.out.println("......Info........receiver: "+msg); }
4.消费者error代码
/** * 消息接收者 * @author Administrator * @RabbitListener bindings:绑定队列 * @QueueBinding value:绑定队列的名称 * exchange:配置交换器 * * @Queue value:配置队列名称 * autoDelete:是否是一个可删除的临时队列 * * @Exchange value:为交换器起个名称 * type:指定具体的交换器类型 */ @Component @RabbitListener( bindings=@QueueBinding( value=@Queue(value="${mq.config.queue.error}",autoDelete="t rue"), exchange=@Exchange(value="${mq.config.exchange}",type=Excha ngeTypes.TOPIC), key="*.log.error" ) ) public class ErrorReceiver { /** * 接收消息的方法。采用消息队列监听机制 * @param msg */ @RabbitHandler public void process(String msg){ System.out.println("......Error........receiver: "+msg); } }
5.消费者log all代码
/** * 消息接收者 * @author Administrator * @RabbitListener bindings:绑定队列 * @QueueBinding value:绑定队列的名称 * exchange:配置交换器 * * @Queue value:配置队列名称 * autoDelete:是否是一个可删除的临时队列 * * @Exchange value:为交换器起个名称 * type:指定具体的交换器类型 */ @Component @RabbitListener( bindings=@QueueBinding( value=@Queue(value="${mq.config.queue.logs}",autoDelete="tr ue"), exchange=@Exchange(value="${mq.config.exchange}",type=Excha ngeTypes.TOPIC), key="*.log.*" ) ) public class LogsReceiver { /** * 接收消息的方法。采用消息队列监听机制 * @param msg */ @RabbitHandler public void process(String msg){ System.out.println("......All........receiver: "+msg); } }
Provider 生产者:相当于上面的商城服务
1.pom文件相同
2.application.protorties文件
spring.application.name=springcloud-mq
spring.rabbitmq.host=192.168.70.131
spring.rabbitmq.port=5672
spring.rabbitmq.username=oldlu
spring.rabbitmq.password=123456
#设置交换器的名称
mq.config.exchange=log.topic
3.用户发送消息代码
/** * 消息发送者 * @author Administrator * */ @Component public class UserSender { @Autowired private AmqpTemplate rabbitAmqpTemplate; //exchange 交换器名称 @Value("${mq.config.exchange}") private String exchange; /* * 发送消息的方法 */ public void send(String msg){ //向消息队列发送消息 //参数一:交换器名称。 //参数二:路由键 //参数三:消息 this.rabbitAmqpTemplate.convertAndSend(this.exchange,"user. log.debug", "user.log.debug....."+msg); this.rabbitAmqpTemplate.convertAndSend(this.exchange,"user. log.info", "user.log.info....."+msg); this.rabbitAmqpTemplate.convertAndSend(this.exchange,"user. log.warn","user.log.warn....."+msg); this.rabbitAmqpTemplate.convertAndSend(this.exchange,"user. log.error", "user.log.error....."+msg); } }
4.商品业务发送消息
/** * 消息发送者 * @author Administrator * */ @Component public class ProductSender { @Autowired private AmqpTemplate rabbitAmqpTemplate; //exchange 交换器名称 @Value("${mq.config.exchange}") private String exchange; /* * 发送消息的方法 */ public void send(String msg){ //向消息队列发送消息 //参数一:交换器名称。 //参数二:路由键 //参数三:消息 this.rabbitAmqpTemplate.convertAndSend(this.exchange,"produ ct.log.debug", "product.log.debug....."+msg); this.rabbitAmqpTemplate.convertAndSend(this.exchange,"produ ct.log.info", "product.log.info....."+msg); this.rabbitAmqpTemplate.convertAndSend(this.exchange,"produ ct.log.warn","product.log.warn....."+msg); this.rabbitAmqpTemplate.convertAndSend(this.exchange,"produ ct.log.error", "product.log.error....."+msg); } }
5.订单发送消息
/** * 消息发送者 * @author Administrator * */ @Component public class OrderSender { @Autowired private AmqpTemplate rabbitAmqpTemplate; //exchange 交换器名称 @Value("${mq.config.exchange}") private String exchange; /* * 发送消息的方法 */ public void send(String msg){ //向消息队列发送消息 //参数一:交换器名称。 //参数二:路由键 //参数三:消息 this.rabbitAmqpTemplate.convertAndSend(this.exchange,"order .log.debug", "order.log.debug....."+msg); this.rabbitAmqpTemplate.convertAndSend(this.exchange,"order .log.info", "order.log.info....."+msg); this.rabbitAmqpTemplate.convertAndSend(this.exchange,"order .log.warn","order.log.warn....."+msg); this.rabbitAmqpTemplate.convertAndSend(this.exchange,"order .log.error", "order.log.error....."+msg); } }
6.测试代码
/** * 消息队列测试类 * @author Administrator * */ @RunWith(SpringRunner.class) @SpringBootTest(classes=SpringbootServerApplication.class) public class QueueTest { @Autowired private UserSender usersender; @Autowired private ProductSender productsender; @Autowired private OrderSender ordersender; /* * 测试消息队列 */ @Test public void test1(){ this.usersender.send("UserSender....."); this.productsender.send("ProductSender...."); this.ordersender.send("OrderSender......"); } }