一、MQ简介
1.1、概述
MQ(Message Queue),是一种提供消息队列服务的中间件,也称为消息中间件,是一套提供了消息(消息即数据,一般消息的体量不会很大)生产、存储、消费全过程的API软件系统。
1.2、应用场景
MQ常用的应用场景主要分为以下三种,即:流量削峰、异步解耦、数据搜集,下面一 一介绍。
1.2.1、流量削峰
MQ可以将系统的超量请求暂存其中,以便系统后期可以慢慢进行处理,从而避免了请求的丢失或系统被压垮。
1.2.2、异步解耦
上游系统对下游系统的调用若为同步调用,则会大大地降低系统的吞吐量与并发度,且系统耦合度较高,而异步调用则会解决这些问题。所以两层之间若要实现由同步到异步的转化,一般性做法就是,在这两层之间添加一个MQ层。
1.2.3、数据搜集
分布式系统会产生海量级数据流,例如:业务日志、监控数据、用户行为等。针对这些数据流进行实时或者批量采集汇总,然后对这些数据流进行大数据分析,是当前互联网平台的必备技术。通过MQ完成此类数据搜集是最好的选择。
1.3、常见的MQ产品
(一)、ActiveMQ
ActiveMQ是使用Java语言开发的一款MQ产品。早期很多公司与项目中都在使用,但是现在的社区活跃度已经很低了,现在的项目中也已经很少使用了。
(二)、RabbitMQ
RabbitMQ是使用ErLang语言开发的一款MQ产品。其吞吐量较Kafka和RocketMQ要低,且由于其不是Java语言开发,所以公司内部对其实现定制化开发难度较大。
(三)、RocketMQ
RocketMQ是使用Java语言开发的一款MQ产品。经过数年阿里巴巴双11的考验,性能与稳定性非常高,其没有遵循任何常见的MQ协议,而是使用自研协议。对于Spring Cloud Alibaba,其支持RabbitMQ、Kafka,但建议使用RocketMQ。
(四)、Kafka
Kafka是使用Scala/Java语言开发的一款MQ产品。其最大的特点就是高吞吐量,常用于大数据领域的实时计算、日志采集等场景,其没有遵循任何常见的MQ协议,而是使用自研协议。
1.4、ActiveMQ vs RabbitMQ vs RocketMQ vs Kafka
1.5、MQ常见协议
1.5.1、概述
般情况下MQ的实现都要遵循一些常规性协议,常见的协议如下:
1.5.2、各种协议
(一)、JMS
JMS(Java Message Service:Java消息服务),是Java平台上有关MOM(Message Oriented Middleware:面向消息的中间件)的技术规范,它便于系统中的Java应用程序进行消息交换,并且提供标准的生产、发送、接收消息的接口,简化企业应用的开发。ActiveMQ是该协议的典型实现。
(二)、STOMP
STOMP(Streaming Text Oriented Message Protocol:面向流文本的消息协议),是一种MOM设计的简单文本协议。STOMP提供一个可互操作的连接格式,允许客户端与任意STOMP消息代理(Broker)进行交互。ActiveMQ是该协议的典型实现,RabbitMQ通过插件可以支持该协议。
(三)、AMQP
AMQP(Advanced Message Queuing Protocol:高级消息队列协议),一个提供统一消息服务的应用层标准,是应用层协议的一个开放标准,是一种MOM设计。基于此协议的客户端与消息中间件可传递消息,并不受客户端/中间件不同产品、不同开发语言的限制。RabbitMQ是该协议的典型实现。
(四)、MQTT
MQTT(Message Queuing Telemetry Transport:消息队列遥测传输),是IBM公司开发的一个即时通讯协议,是一种二进制协议,主要用于服务器和低功耗IoT(物联网)设备间的通信。该协议支持所有平台,几乎可以把所有物联网物品和外部连接起来,被用来当做传感器和制动器的通信协议。RabbitMQ通过插件可以支持该协议。