ZeroMQ、RabbitMQ、ActiveMQ

江枫思渺然 提交于 2020-05-05 10:17:52

【ZeroMQ】

ZeroMQ是一种基于消息队列的多线程网络库,其对套接字类型、连接处理、帧、甚至路由的底层细节进行抽象,提供跨越多种传输协议的套接字。
ZeroMQ是网络通信中的新的一层,结余应用层和传输层之间按照tcp/ip划分。是一个可伸缩层,并行运行,分散在分布式系统间。
ZeroMQ号称是“史上最快的消息队列”,基于c语言开发的,实时流处理sorm的task之间的通信就是用的zeroMQ

【RabbitMQ】

RabbitMQ是实现了高级消息队列协议(AMQP)的开源消息代理软件(亦称面向消息的中间件)。RabbitMQ服务器是用Erlang语言编写的,而群集和故障转移是构建在开放电信平台框架上的。所有主要的编程语言均有与代理接口通讯的客户端库。

【ActiveMQ】

Apache ActiveMQ是Apache软件基金会所研发的开放源代码消息中间件;由于ActiveMQ是一个纯Java程序,因此只需要操作系统支持Java虚拟机,ActiveMQ便可执行。
ActiveMQ是一种开源的基于JMS(Java Message Servie)规范的一种消息中间件的实现,ActiveMQ的设计目标是提供标准的,面向消息的,能够跨越多语言和多系统的应用集成消息通信中间件。
【ActiveMQ的两种消息传递类型】
1、点对点传输,一个生产者对应一个消费者,生产者向broke推送数据,数据存储在broke的一个队列中,当消费者接受该条队列里的数据。
2、基于发布/订阅模式的传输,根据订阅话题来接收相应数据,一个生产者可以向多个消费者推送数据。
【总结】
点对点传输:消费者可以接收到在连接之前生产者所推送的数据;
发布/订阅:消费者只能接收到连接之后生产者推送的数据。






【ActiveMQ小demo 点对点形式】
1、启动ActiveMQ
ZeroMQ、RabbitMQ、ActiveMQ

ZeroMQ、RabbitMQ、ActiveMQ
ZeroMQ、RabbitMQ、ActiveMQ
登录名及密码:admin admin
它的日志在
apache-activemq-5.14.4/data中



ZeroMQ、RabbitMQ、ActiveMQ

2、在Spring boot项目中加入对activeMq的依赖。

    <!--消息队列 activeMq -->
    <dependency>
        <groupId>org.apache.activemq</groupId>
        <artifactId>activemq-all</artifactId>
        <version>5.9.0</version>
    </dependency>

3、ActiveMQ生产者

package com.example.demo;

import org.apache.activemq.ActiveMQConnectionFactory;
import javax.jms.*;

/**
 * ActiveMQ生产者
 * 2020年5月3日19:05:16
 */
public class ActiveMqProducer {

        private static final String ACTIVEMQ_URL = "tcp://127.0.0.1:61616";

        public static void main(String[] args) {
                try{
                        // 创建连接工厂
                        ActiveMQConnectionFactory activeMQConnectionFactory = new ActiveMQConnectionFactory(ACTIVEMQ_URL);
                        // 创建连接
                        Connection connection = activeMQConnectionFactory.createConnection();
                        // 打开连接
                        connection.start();
                        // 创建会话
                        Session session = connection.createSession(false, Session.AUTO_ACKNOWLEDGE);
                        // 创建队列目标,并标识队列名称,消费者根据队列名称接收数据
                        Destination destination = session.createQueue("myQueue");
                        // 创建一个生产者
                        MessageProducer producer = session.createProducer(destination);
                        // 向队列推送10个文本消息数据
                        for (int i = 1 ; i <= 10 ; i++){
                                // 创建文本消息
                                TextMessage message = session.createTextMessage("第" + i + "个文本消息");
                                //发送消息
                                producer.send(message);
                                //在本地打印消息
                                System.out.println("已发送的消息:" + message.getText());
                        }
                        //关闭连接
                        connection.close();
                }catch (Exception e){
                        e.printStackTrace();
                }

        }
}

【PS:这里的tcp端口号为什么是61616呢?】

ActiveMQ允许客户端使用多种协议来连接
配置Transport Connector的文件在activeMQ安装目录的conf/activemq.xml中的<transportConnectors>标签之内。

<transportConnectors>
        <!-- DOS protection, limit concurrent connections to 1000 and frame size to 100MB -->
        <transportConnector name="openwire" uri="tcp://0.0.0.0:61616?maximumConnections=1000&wireFormat.maxFrameSize=104857600"/>
        <transportConnector name="amqp" uri="amqp://0.0.0.0:5672?maximumConnections=1000&wireFormat.maxFrameSize=104857600"/>
        <transportConnector name="stomp" uri="stomp://0.0.0.0:61613?maximumConnections=1000&wireFormat.maxFrameSize=104857600"/>
        <transportConnector name="mqtt" uri="mqtt://0.0.0.0:1883?maximumConnections=1000&wireFormat.maxFrameSize=104857600"/>
        <transportConnector name="ws" uri="ws://0.0.0.0:61614?maximumConnections=1000&wireFormat.maxFrameSize=104857600"/>
</transportConnectors>

ActiveMQ支持的client-broker通讯协议有:TCP、NIO、UDP、SSL、Http(s)、VM

Transmission Control Protocol (TCP)

1:这是默认的Broker配置,TCP的Client监听端口是61616。
2:在网络传输数据前,必须要序列化数据,消息是通过一个叫wire protocol的来序列化成字节流。默认情况下,ActiveMQ把wire protocol叫做OpenWire,它的目的是促使网络上的效率和数据快速交互。
3:TCP连接的URI形式:tcp://hostname:port?key=value&key=value,加粗部分是必须的
4:TCP传输的优点:
(1)TCP协议传输可靠性高,稳定性强
(2)高效性:字节流方式传递,效率很高
(3)有效性、可用性:应用广泛,支持任何平台
5:所有关于Transport协议的可配置参数,可以参见:
http://activemq.apache.org/configuring-version-5-transports.html







<transportConnector name="openwire" uri="tcp://0.0.0.0:61616?maximumConnections=1000&wireFormat.maxFrameSize=104857600"/>
New I/O API Protocol(NIO)

1:NIO协议和TCP协议类似,但NIO更侧重于底层的访问操作。它允许开发人员对同一资源可有更多的client调用和服务端有更多的负载。
2:适合使用NIO协议的场景:
(1)可能有大量的Client去链接到Broker上一般情况下,大量的Client去链接Broker是被操作系统的线程数所限制的。因此,NIO的实现比TCP需要更少的线程去运行,所以建议使用NIO协议
(2)可能对于Broker有一个很迟钝的网络传输NIO比TCP提供更好的性能
3:NIO连接的URI形式:nio://hostname:port?key=value
4:Transport Connector配置示例:




复制代码
<transportConnectors>
  <transportConnector
    name="tcp"
    uri="tcp://localhost:61616?trace=true" />
  <transportConnector
    name="nio"
    uri="nio://localhost:61618?trace=true" />
</transportConnectors>
复制代码
上面的配置,示范了一个TCP协议监听61616端口,一个NIO协议监听61618端口









User Datagram Protocol(UDP)
1:UDP和TCP的区别
(1)TCP是一个原始流的传递协议,意味着数据包是有保证的,换句话说,数据包是不会被复制和丢失的。UDP,另一方面,它是不会保证数据包的传递的
(2)TCP也是一个稳定可靠的数据包传递协议,意味着数据在传递的过程中不会被丢失。这样确保了在发送和接收之间能够可靠的传递。相反,UDP仅仅是一个链接协议,所以它没有可靠性之说
2:从上面可以得出:TCP是被用在稳定可靠的场景中使用的;UDP通常用在快速数据传递和不怕数据丢失的场景中,还有ActiveMQ通过防火墙时,只能用UDP
3:UDP连接的URI形式:udp://hostname:port?key=value
4:Transport Connector配置示例:





<transportConnectors>
<transportConnector
name="udp"
uri="udp://localhost:61618?trace=true" />
</transportConnectors>
Secure Sockets Layer Protocol (SSL)




1:连接的URI形式:ssl://hostname:port?key=value
2:Transport Connector配置示例:

<transportConnectors>
<transportConnector name="ssl" uri="ssl://localhost:61617?trace=true"/>
</transportConnectors>
Hypertext Transfer Protocol (HTTP/HTTPS)


1:像web和email等服务需要通过防火墙来访问的,Http可以使用这种场合
2:连接的URI形式:http://hostname:port?key=value或者https://hostname:port?key=value
3:Transport Connector配置示例:

<transportConnectors>
<transportConnector name="http" uri="http://localhost:8080?trace=true" />
</transportConnectors>
VM Protocol(VM)


1、VM transport允许在VM内部通信,从而避免了网络传输的开销。这时候采用的连 接不是socket连接,而是直接的方法调用。

2、第一个创建VM连接的客户会启动一个embed VM broker,接下来所有使用相同的 broker name的VM连接都会使用这个broker。当这个broker上所有的连接都关闭 的时候,这个broker也会自动关闭。

3、连接的URI形式:vm://brokerName?key=value

4、Java中嵌入的方式: vm:broker:(tcp://localhost:6000)?brokerName=embeddedbroker&persistent=fal se , 定义了一个嵌入的broker名称为embededbroker以及配置了一个 tcptransprotconnector在监听端口6000上

5、使用一个加载一个配置文件来启动broker vm://localhost?brokerConfig=xbean:activemq.xml

参考资料:《ActiveMQ支持的传输协议》

启动ActiveMqProducer.java后:

ZeroMQ、RabbitMQ、ActiveMQ

ZeroMQ、RabbitMQ、ActiveMQ

接下来我们创建消费者(接受者)

    package com.example.demo;

    import org.apache.activemq.ActiveMQConnectionFactory;
    import javax.jms.*;

    /**
     * ActiveMQ 消费者
     * 2020年5月3日19:12:04
     */
    public class ActiveMQConsumer {
            private static final String ACTIVEMQ_URL = "tcp://127.0.0.1:61616";

            public static void main(String[] args) throws JMSException {
                    // 创建连接工厂
                    ActiveMQConnectionFactory activeMQConnectionFactory = new ActiveMQConnectionFactory(ACTIVEMQ_URL);
                    // 创建连接
                    Connection connection = activeMQConnectionFactory.createConnection();
                    // 打开连接
                    connection.start();
                    // 创建会话
                    Session session = connection.createSession(false, Session.AUTO_ACKNOWLEDGE);
                    // 创建队列目标,并标识队列名称,消费者根据队列名称接收数据
                    Destination destination = session.createQueue("myQueue");
                    // 创建消费者
                    MessageConsumer consumer = session.createConsumer(destination);
                    // 创建消费的监听
                    consumer.setMessageListener(new MessageListener() {
                            @Override
                            public void onMessage(Message message) {
                                    TextMessage textMessage = (TextMessage) message;
                                    try {
                                            System.out.println("消费的消息:" + textMessage.getText());
                                    } catch (JMSException e) {
                                            e.printStackTrace();
                                    }
                            }
                    });
            }

    }

启动Consumer.java后

ZeroMQ、RabbitMQ、ActiveMQ

我们可以通过ActiveMQ主动给消费者发送消息

ZeroMQ、RabbitMQ、ActiveMQ

ZeroMQ、RabbitMQ、ActiveMQ

【拓展】

到这里笔者,又有想法了。如果我们一个ActiveMQproductor给多个consumer发送消息会出现什么状况呢?(不妨一试)

这次我们先启动,多个consumer,再启动productor
1、创建n个consumer

package com.example.demo;

import org.apache.activemq.ActiveMQConnectionFactory;
import javax.jms.*;

public class ActiveMQConsumerFrozen {

        public static void main(String[] args) throws JMSException {
                // 创建连接工厂
                ActiveMQConnectionFactory activeMQConnectionFactory = new ActiveMQConnectionFactory(ActiveMQConsumer.ACTIVEMQ_URL);
                // 创建连接
                Connection connection = activeMQConnectionFactory.createConnection();
                // 打开连接
                connection.start();
                // 创建会话
                Session session = connection.createSession(false, Session.AUTO_ACKNOWLEDGE);
                // 创建队列目标,并标识队列名称,消费者根据队列名称接收数据
                Destination destination = session.createQueue("myQueue");
                // 创建消费者
                MessageConsumer consumer = session.createConsumer(destination);
                // 创建消费的监听
                consumer.setMessageListener(new MessageListener() {
                        @Override
                        public void onMessage(Message message) {
                                TextMessage textMessage = (TextMessage) message;
                                try {
                                        System.out.println("Frozen消费的消息:" + textMessage.getText());
                                } catch (JMSException e) {
                                        e.printStackTrace();
                                }
                        }
                });
        }
}

    package com.example.demo;

    import org.apache.activemq.ActiveMQConnectionFactory;
    import javax.jms.*;

    public class ActiveMQConsumerRedAnt {
            public static void main(String[] args) throws JMSException {
                    // 创建连接工厂
                    ActiveMQConnectionFactory activeMQConnectionFactory = new ActiveMQConnectionFactory(ActiveMQConsumer.ACTIVEMQ_URL);
                    // 创建连接
                    Connection connection = activeMQConnectionFactory.createConnection();
                    // 打开连接
                    connection.start();
                    // 创建会话
                    Session session = connection.createSession(false, Session.AUTO_ACKNOWLEDGE);
                    // 创建队列目标,并标识队列名称,消费者根据队列名称接收数据
                    Destination destination = session.createQueue("myQueue");
                    // 创建消费者
                    MessageConsumer consumer = session.createConsumer(destination);
                    // 创建消费的监听
                    consumer.setMessageListener(new MessageListener() {
                            @Override
                            public void onMessage(Message message) {
                                    TextMessage textMessage = (TextMessage) message;
                                    try {
                                            System.out.println("RedAnt消费的消息:" + textMessage.getText());
                                    } catch (JMSException e) {
                                            e.printStackTrace();
                                    }
                            }
                    });
            }
    }

2依次启动

ZeroMQ、RabbitMQ、ActiveMQ

ZeroMQ、RabbitMQ、ActiveMQ

ZeroMQ、RabbitMQ、ActiveMQ

3好了一个演示,说明问题:轮询的形式

【接下来,是第二种小demo:发布/订阅模式】

首先生产者productor,它与点对点的形式的区别在于:

【点对点形式】

                // 创建队列目标,并标识队列名称,消费者根据队列名称接收数据
                Destination destination = session.createQueue("myQueue");

【发布/订阅模式】

 // 创建队列目标,并标识队列名称,消费者根据队列名称接收数据
                Destination destination = session.createTopic("fronzenTop");

    package com.example.demo;

    import org.apache.activemq.ActiveMQConnectionFactory;
    import javax.jms.*;

    /**
     * 基于发布/订阅模式
     * 2020年5月4日11:59:56
     */
    public class ActiveMqProducerTop {

            public static final String ACTIVEMQ_URL = "tcp://127.0.0.1:61616";

            public static void main(String[] args) {
                    try{
                            // 创建连接工厂
                            ActiveMQConnectionFactory activeMQConnectionFactory = new ActiveMQConnectionFactory(ACTIVEMQ_URL);
                            // 创建连接
                            Connection connection = activeMQConnectionFactory.createConnection();
                            // 打开连接
                            connection.start();
                            // 创建会话
                            Session session = connection.createSession(false, Session.AUTO_ACKNOWLEDGE);
                            // 创建队列目标,并标识队列名称,消费者根据队列名称接收数据
                            Destination destination = session.createTopic("fronzenTop");
                            // 创建一个生产者
                            MessageProducer producer = session.createProducer(destination);
                            // 向队列推送10个文本消息数据
                            for (int i = 1 ; i <= 10 ; i++){
                                    // 创建文本消息
                                    TextMessage message = session.createTextMessage("第" + i + "个文本消息");
                                    //发送消息
                                    producer.send(message);
                                    //在本地打印消息
                                    System.out.println("已发送的消息:" + message.getText());
                            }
                            //关闭连接
                            connection.close();
                    }catch (Exception e){
                            e.printStackTrace();
                    }

            }

    }

同理消费者consumer也是这点差别

    // 创建队列目标,并标识队列名称,消费者根据队列名称接收数据
    Destination destination = session.createQueue("myQueue");

             // 创建队列目标,并标识队列名称,消费者根据队列名称接收数据
    Destination destination = session.createTopic("fronzenTop");

    package com.example.demo;

    import org.apache.activemq.ActiveMQConnectionFactory;
    import javax.jms.*;

    /**
     *基于发布/订阅模式
     * 2020年5月4日12:05:52
     */
    public class ActiveMQConsumerTop {

            public static final String ACTIVEMQ_URL = "tcp://127.0.0.1:61616";

            public static void main(String[] args) throws JMSException {
                    // 创建连接工厂
                    ActiveMQConnectionFactory activeMQConnectionFactory = new ActiveMQConnectionFactory(ACTIVEMQ_URL);
                    // 创建连接
                    Connection connection = activeMQConnectionFactory.createConnection();
                    // 打开连接
                    connection.start();
                    // 创建会话
                    Session session = connection.createSession(false, Session.AUTO_ACKNOWLEDGE);
                    // 创建队列目标,并标识队列名称,消费者根据队列名称接收数据
                    Destination destination = session.createTopic("fronzenTop");
                    // 创建消费者
                    MessageConsumer consumer = session.createConsumer(destination);
                    // 创建消费的监听
                    consumer.setMessageListener(new MessageListener() {
                            @Override
                            public void onMessage(Message message) {
                                    TextMessage textMessage = (TextMessage) message;
                                    try {
                                            System.out.println("消费的消息:" + textMessage.getText());
                                    } catch (JMSException e) {
                                            e.printStackTrace();
                                    }
                            }
                    });
            }

    }

现在如果我们先启动生产者,再启动消费者,会发现消费者是无法接收到之前生产者之前所生产的数据,只有消费者先启动,再让生产者消费才可以正常接收数据,这也是发布/订阅的主题模式与点对点的队列模式的一个明显区别
而如果启动两个消费者,那么每一个消费者都能完整的接收到生产者生产的数据,即每一条数据都被消费了两次,这是发布/订阅的主题模式与点对点的队列模式的另一个明显区别。

参考资料:《浅谈ActiveMQ与使用》

易学教程内所有资源均来自网络或用户发布的内容,如有违反法律规定的内容欢迎反馈
该文章没有解决你所遇到的问题?点击提问,说说你的问题,让更多的人一起探讨吧!