消息中间件通也被称为消息队列服务器,是当今分布式应用架构中经常采用的技术。
在系统软件中,操作系统、数据库、中间件三驾马车,对于专业人士来说,中间件也是最神秘的。中间件是一个专业化非常强的细分产业,中间件的技术门槛较高。但是从 2008 年开始中间件得到了蓬勃发展,开发者对中间件这个词不再陌生,周围被各种中间件围绕。
其中消息队列是开发中经常用到的一种中间件技术。
什么是消息中间件?
消息中间件是利用高效可靠的消息传递机制进行平台无关的数据通信来达到分布式系统的集成目的,通过提供消息传递和消息排队模型,可以在分布式架构下扩展进程之间的通信。对于消息中间件,常见的角色就是Producer(生产者)、Consumer(消费者) 、broker(消息中间件实例)。
消息队列发展史
世界上第一个现代消息队列软件 The Information Bus(TIB),采用发布订阅的模式解决不同程序直接的通信需求, TIB 的发展引起了IBM的注意,于是IBM开发了自己的消息队列软件“IBM WebSphere MQ”,后来微软发布了自己的(MSMQ)。
随着IT信息时代的发展,程序之间互联互通的需求越来越强烈,但是各大IT厂商们还是牢牢建立着各种技术壁垒,保证自己的商业利益,消息中间件依旧是各大型企业能够用的起的东西。
各大厂商直接的协议不通,导致了开发成本的增加,一个开发人员既要懂IBM的,又要懂微软的,对开发人员来说也充满了压力,2001年sun发布了 JMS ( Java Message Service)技术,试图在各大厂商的基础上再包装一层统一的 Java 规范, Java 程序只需要针对 JMS API 编程就可以了,不需要关注使用了什么样的消息中间件,但是 JMS 仅仅适用于 Java 。
2004年 AMQP (高级消息队列协议)诞生了,真正促进了消息队列的繁荣发展,任何人都可以针对 AMQP 的标准进行编码,并和实现了 AMQP 的中间件供应商进行通信。
加上互联网分布式应用的迅猛发展,使得消息中间件一飞冲天,开源消息中间件层出不穷,常见比较流行的有 ActiveMQ、RabbitMQ、Kafak、阿里的 RocketMQ 等,在互联网应用中消息队列中间件基本上成为标配。
消息队列的应用场景
在高并发环境下,我们会利用消息队列进行异步,解耦,流量削峰。
异步处理+系统解耦
拿“用户注册”这个业务来说,除了要把用户信息保存到数据库之外,注册成功后,我们还需要给用户短信发送注册结果,通知积分系统为用户赠送积分等等。
假设这3个操作,每个操作需要1秒钟,那么整个注册过程就需要3秒钟才能响应给用户。其实对注册服务来说,最重要的就是信息入库,后面的短信提醒和赠送积分可以采用异步执行,提高系统的响应能力。
实行异步化处理,可以采用多线程的方式实现,但是对于消息的持久化,消息的重发来说,多线程的方式不能很好的支持,因此我们可以借助一些开源中间件来解决。
通过异步处理,给用户响应的时间可以提高到1秒,同时短信提醒和赠送积分可以并行操作,提升了系统的处理效率,提高了系统性能。
把信息入库,短信提醒,赠送积分等等操作写到不同的系统里,做成不同的服务,使系统之间做到解耦,不必把这些操作都放到注册服务里,同时可以做到系统解耦。
流量削峰
在高并发环境下,前端请求流量会非常大,通过消息队列的方式可以很好的缓解高流量的问题,比如秒杀业务。前端请求先写入消息队列,然后给用户返回,当消息队列超过指定的长度,直接丢弃;秒杀服务负责处理核心业务,接收消息队列的消息进行秒杀处理,以达到流量的削峰。
ActiveMQ 简介以及下载安装
Apache ActiveMQ 是最流行的开源,多协议,基于Java JMS 规范的消息服务器。ActiveMQ 主要应用在分布式系统架构中,构建高可用、 高性能、可伸缩的面向消息服务的系统,它支持行业标准协议,使用 AMQP 协议集成多平台应用程序,使用 STOMP 通过 websockets 在 Web 应用程序之间交换消息,ActiveMQ 提供强大的功能以支持任何消息的传递。
由于 ActiveMQ 是一个纯 Java 程序,因此只需要操作系统支持 Java 虚拟机,ActiveMQ 便可执行。
1、完全支持 JMS 1.1 和 J2EE 1.4规范;2、Spring 支持,以便ActiveMQ可以轻松嵌入到Spring应用程序中,并使用Spring的XML配置机制进行配置
ActiveMQ 的安装
1、下载地址:Download Archives
选择你想安装的版本进行下载
Linux系统选择tar.gz版本,windows系统选择bin.zip版本进行下载。
2、把下载好的压缩包拷贝到服务器上,进行解压
解压命令:tar -zxvf apache-activemq-5.15.0-bin.tar.gz
解压后,activemq的文件目录结构为如下:
目录名称 | 目录说明 |
---|---|
data | log文件和kahadb文件 |
lib | 一些jia包 |
bin | 启动脚本等shell目录 |
conf | activemq.xml等配置文件 |
activemq-all-5.15.0.jar | 开发所需jar包 |
docs | 使用文档 |
examples | 使用样例 |
webapps | 监控服务 |
3、启动运行,到bin目录下执行命令进行启动activeMQ服务
启动命令:sh activemq start
4、检查是否启动
ActiveMQ 默认采用 61616 端口提供消息服务,使用 8161 端口提供管理监控服务。
执行以下命令可以检查是否成功启动 ActiveMQ 服务:
netstat an|grep 61616
或者执行以下命令检查是否成功启动 ActiveMQ 服务:
ps -ef|grep activemq
可以通过启动日志查看,是否有异常:
tail -fn500 ../data/activemq.log
5、通过 http://你的ip地址:8161 访问 activeMQ 管理页面,如下:
默认帐号/密码:admin/admin
这样,说明ActiveMQ 服务已经启动。
6、关闭 ActiveMQ 服务: sh activemq stop