摘自:码友18年(www.mayou18.com)
what is rocketMQ?
RocketMQ作为一款分布式的消息中间件(阿里的说法是不遵循任何规范的,所以不能完全用JMS的那一套东西来看它),经历了Metaq1.x、Metaq2.x的发展和淘宝双十一的洗礼,在功能和性能上远超ActiveMQ。RocketMQ 是一款分布式、队列模型的消息中间件,具有以下特点:
专业&验证
1、MQ是消息领域业内专业的消息中间件,多次在国内外获奖
2、经过双11阿里交易、商品、营销等核心链路真实场景验证
3、阿里集团内部1000+核心应用使用,每天流转几千亿条消息,稳定可靠
技术体系
1、产品历史超过7年,消息保证不丢,技术体系丰富成熟
2、阿里内部产品名:MetaQ、Notify
3、开源社区产品名:RocketMQ,无技术绑定风险
4、应用灵活,无任何强制绑定其他产品
独立部署
1、支持专有云独立输出,支持物理机和虚拟机,最小部署仅几台机器
2、专有云配套运维系统,方便运维人员实时监控系统状态
3、专有云配套mqadmin命令集和管理类open API,方便集成及统一运维
4、支持混合云架构,包括VPC用户
高可靠
1、一份消息多份落盘存储,经过严格断电测试,消息依然保证不丢失
2、支持消息轨迹,消息从生产到消费轨迹,可清晰排查
3、海量消息堆积,单个Topic可堆积100亿+条消息,防止系统高流量崩溃
4、默认情况下消息落盘保留3天
高性能
1、同一网络内,消息传输RT在10毫秒之内,性能测试下,网卡可被打满
2、公有云默认单Topic 发送消息为每秒5000条,最高可申请扩展至10W以上支持大量消息并发发送,超过5万个队列,性能依然卓越
3、支持消息海量堆积,单Topic可堆积100+亿条消息
多协议
1、HTTP接入:支持跨网络调用,HTTP公网接入支持跨网络调用,HTTP Restful接口公网接入
2、MQTT接入:支持主动推送模,多级Topic模型支持一次触达1000万+终端可广泛应用于物联网和社交即时通信场景,可跟JStorm等实时计算完美结合
3、TCP接入(专业) :区别于HTTP简单的接入方式,同时提供更为专业、可靠、稳定的TCP协议的SDK接入
RocketMQ 代码实现
pom.xml
<dependency>
<groupId>com.alibaba.rocketmq</groupId>
<artifactId>rocketmq-client</artifactId>
<version>3.2.6</version>
</dependency>
<dependency>
<groupId>org.slf4j</groupId>
<artifactId>slf4j-log4j12</artifactId>
<version>1.7.7</version>
</dependency>
Producer.java
import com.alibaba.rocketmq.client.exception.MQClientException;
import com.alibaba.rocketmq.client.producer.DefaultMQProducer;
import com.alibaba.rocketmq.client.producer.SendResult;
import com.alibaba.rocketmq.common.message.Message;
public class Producer {
public static void main(String[] args) throws MQClientException,
InterruptedException {
/**
* 一个应用创建一个Producer,由应用来维护此对象,可以设置为全局对象或者单例<br>
* 注意:ProducerGroupName需要由应用来保证唯一<br>
* ProducerGroup这个概念发送普通的消息时,作用不大,但是发送分布式事务消息时,比较关键,
* 因为服务器会回查这个Group下的任意一个Producer
*/
DefaultMQProducer producer = new DefaultMQProducer("ProducerGroupName");
producer.setNamesrvAddr("192.168.0.123:9876");
/**
*默认情况下,一台服务器只能启动一个Producer或Consumer实例,所以如果需要在一台服务器启
*动多个实例,需要设置实例的名称
*/
producer.setInstanceName("Producer");
producer.setSendMsgTimeout(3000);//发送消息超时
producer.setRetryTimesWhenSendFailed(2);//发送失败后,重试几次
/**
* Producer对象在使用之前必须要调用start初始化,初始化一次即可<br>
* 注意:切记不可以在每次发送消息时,都调用start方法
*/
producer.start();
/**
* 下面这段代码表明一个Producer对象可以发送多个topic,多个tag的消息。
* 注意:send方法是同步调用,只要不抛异常就标识成功。但是发送成功也可会有多种状态,<br>
* 例如消息写入Master成功,但是Slave不成功,这种情况消息属于成功,但是对于个别应用如果对消息可靠性要求极高,<br>
* 需要对这种情况做处理。另外,消息可能会存在发送失败的情况,失败重试由应用来处理。
*/
for (int i = 0; i < 100; i++) {
try {
{
Message msg = new Message("TopicTest1",// topic
"TagA",// tag
"OrderID001",// key
("Hello MetaQ").getBytes());// body
SendResult sendResult = producer.send(msg);
System.out.println(sendResult);
}
{
Message msg = new Message("TopicTest2",// topic
"TagB",// tag
"OrderID0034",// key
("Hello MetaQ").getBytes());// body
SendResult sendResult = producer.send(msg);
System.out.println(sendResult);
}
{
Message msg = new Message("TopicTest3",// topic
"TagC",// tag
"OrderID061",// key
("Hello MetaQ").getBytes());// body
SendResult sendResult = producer.send(msg);
System.out.println(sendResult);
}
} catch (Exception e) {
e.printStackTrace();
}
TimeUnit.MILLISECONDS.sleep(1000);
}
/**
* 应用退出时,要调用shutdown来清理资源,关闭网络连接,从服务器上注销自己
* 注意:我们建议应用在JBOSS、Tomcat等容器的退出钩子里调用shutdown方法
*/
producer.shutdown();
}
}
PushConsumer.java
import java.util.List;
import com.alibaba.rocketmq.client.consumer.DefaultMQPushConsumer;
import com.alibaba.rocketmq.client.consumer.listener.ConsumeConcurrentlyContext;
import com.alibaba.rocketmq.client.consumer.listener.ConsumeConcurrentlyStatus;
import com.alibaba.rocketmq.client.consumer.listener.MessageListenerConcurrently;
import com.alibaba.rocketmq.client.exception.MQClientException;
import com.alibaba.rocketmq.common.message.MessageExt;
public class PushConsumer {
/**
* 内部是使用长轮询Pull方式从MetaQ服务器拉消息,然后再回调用户Listener方法<br>
*/
public static void main(String[] args) throws InterruptedException,
MQClientException {
/**
* 一个应用创建一个Consumer,由应用来维护此对象,可以设置为全局对象或者单例<br>
* 注意:ConsumerGroupName需要由应用来保证唯一。
*不同consumer group里的consumer即便是消费同一个topic下的同一个queue,
*那消费进度也是分开存储的。也就是说,不同的consumer group内的consumer的消费
*完全隔离,彼此不受影响。
*/
DefaultMQPushConsumer consumer = new DefaultMQPushConsumer(
"ConsumerGroupName");
consumer.setNamesrvAddr("192.168.0.123:9876");
consumer.setInstanceName("Consumber");
//广播消费是指一个consumer只要订阅了某个topic的消息,那它就会收到该topic下的所有queue里的消息,
//而不管这个consumer的group是什么。所以对于广播消费来说,consumer group没什么实际意义。consumer可以在实例化时,我们可以指定是集群消费还是广播消费。
//consumer.setMessageModel(MessageModel.BROADCASTING);
/**
* 订阅指定topic下tags分别等于TagA或TagC或TagD
*/
consumer.subscribe("TopicTest1", "TagA || TagC || TagD");
/**
* 订阅指定topic下所有消息<br>
* 注意:一个consumer对象可以订阅多个topic
*/
consumer.subscribe("TopicTest2", "*");
consumer.registerMessageListener(new MessageListenerConcurrently() {
/**
* 默认msgs里只有一条消息,可以通过设置consumeMessageBatchMaxSize参数来批量接收消息
*/
@Override
public ConsumeConcurrentlyStatus consumeMessage(
List<MessageExt> msgs, ConsumeConcurrentlyContext context) {
System.out.println(Thread.currentThread().getName()
+ " Receive New Messages: " + msgs.size());
MessageExt msg = msgs.get(0);
if (msg.getTopic().equals("TopicTest1")) {
// 执行TopicTest1的消费逻辑
if (msg.getTags() != null && msg.getTags().equals("TagA")) {
// 执行TagA的消费
System.out.println(new String(msg.getBody()));
} else if (msg.getTags() != null
&& msg.getTags().equals("TagC")) {
// 执行TagC的消费
} else if (msg.getTags() != null
&& msg.getTags().equals("TagD")) {
// 执行TagD的消费
}
} else if (msg.getTopic().equals("TopicTest2")) {
System.out.println(new String(msg.getBody()));
}
return ConsumeConcurrentlyStatus.CONSUME_SUCCESS;
}
});
/**
* Consumer对象在使用之前必须要调用start初始化,初始化一次即可<br>
*/
consumer.start();
System.out.println("Consumer Started.");
}
}