消息中间件介绍
消息中间件带来的好处: 解耦,异步。横向扩展,安全可靠,顺序保证(kafka)。。。
概述:
什么是中间件?
非底层操作系统软件,非业务应用软件,不是直接给最终用户使用的,不能直接给客户带来价值的软件统称为中间件。
什么是消息中间件?
是关注于数据的发送和接收,利用高效可靠的异步消息传递机制集成分布式系统
图示:
什么是JMS ?
java消息服务,是一个java平台关于面向消息中间件的API,用于在两个应用程序之间,或分布式系统中发送消息,进行异步通信。
什么是AMQP?
是一个提供统一消息服务的应用层标准协议,基于此协议的客户端与消息中间件可传递消息,并不受客户端/中间件
不同产品,不同开发语言等条件的限制。
JMS和AMQP的对比
项目 | JMS规范 | AMQP协议 |
---|---|---|
定义 | java的API | Wire-protocol 传输层的线协议 |
跨语言 | 否 | 是 |
消息类型 | 提供两种消息模型:p2p, pub/sub | 提供五种消息模型:direct, fanout, topic, headers, system |
消息类型 | TextMessage, MapMessage,ByteMessage,StreamMessage,ObjectMessage,Message | byte[](二进制) |
综合评价 | JMS定义了java API层面的标准,在java体系中,多个Client均可通过jms进行交互,不需要应用修改代码,但是其对跨平台的支持较差 | AMQP的主要特征是面向消息,队列,路由(包括点对点和发布/订阅),可靠性,安全 |
常见消息中间件对比
ActiveMQ特性:
- 多种语言和协议编写客户端。
语言:java,c, c++,c#,Ruby,Perl,Python,PHP
应用协议:OpenWire,Stomp, REST, WS, Notification,XMPP, AMQP - 完全支持JMS1.1和J2EE 1.4规范(持久化,XA消息,事务)
RabbitMQ:
RabbitMQ是一个开源的AMQP的实现,服务端采用Erlang语言编写,用于分布式系统中存储转发消息,在易用性,扩展性,高可用性等方面表现不俗。
特性:
1. 支持多种客户端,如Python,Ruby,.NET,Java,JMS,C,PHP,ActionScript等。
2. 是AMQP模型的完整实现(vhost,Exchange,Binding,Routing Key等)
3. 支持事务/发布确认
4. 支持消息持久化
Kafka:
Kafka是一种高吞吐量的分布式发布订阅消息系统,是一个分布式的,分区的,可靠的分布式日志存储服务。他通过一种独一无二的设计提供了一个消息系统的功能。
特性:
1. 通过算法复杂度为O(1)的算法对磁盘数据结构提供消息持久化,这种结构对于即使数以TB级别的消息存储也能够保持长时间的稳定性能
2. 支持高吞吐量,即使是非常普通的硬件Kafka也能支持每秒数百万的消息
3. Kafka特性有已分区的,消费者的分组(Partition,Consumer Group)
综合评价:
项目 | ActiveMQ | RabbitMQ | Kafka |
---|---|---|---|
跨语言 | 支持(Java优先) | 语言无关 | 支持(Java优先) |
支持协议 | OpenWire,Stomp,XMPP,AMQP | AMQP | |
优点 | 遵循JMS规范,安装部署方便 | 继承Erlang天生的并发性,最初用于金融行业,稳定性,安全性有保障 | 依赖zk,可动态扩展节点,高性能,高吞吐量,无限扩容,消息可指定追溯 |
缺点 | 会丢失消息,目前重心在吓呆产品apolle上,目前社区不活跃,对5.x维护较少 | Erlang语言难度较大,不支持动态扩展 | 严格的顺序机制,不支持消息优先级,不支持标准的消息协议,不利于平台迁移 |
综合评价 | 适合中小企业级消息应用场景,不适合上千个队列的应用场景 | 适合对稳定性要求高的企业级应用 | 一般应用在大数据日志处理或对实时性(少量延迟),可靠性(少量丢数据)要求稍低的场景使用 |