Question

我正在使用mosquitto代理和客户端以及paho客户端对服务/客户端服务进行一些性能测试。我得到了一些奇怪的结果：

部署说明：

3台机器;生产者，经纪人，消费者
制作人：尽可能快地使用mosquitto_pub的6个python脚本。见下文。
消费者：下面简单的java客户端显示。订阅所有主题。
硬件细节没有显示出显着差异。

1）Mosquitto获得了大约1459.5055条消息/秒，但它只发送了973.9596666666667。订阅者只需获得485.5458333333333。

2）无论创建多少个paho客户端实例，性能都不会提高。例如。如果您在一个主题中运行6个生产者，在两个主题中运行2个消费者，您将获得485.5458333333333。但是如果你将6个生成器添加到另一个主题（已经检查过消息总量增加），则总性能保持不变，每个主题除以2。

3）如果对两个独立的java应用程序进行精确测试，性能不会下降。每个应用程序都获得最高性能。

在任何情况下，CPU或内存都不会达到任何限制。

Producers.py

from datetime import datetime, date, time
import os,sys,time, json, random, itertools

arg = sys.argv
host="broker"

n=1
if len(arg)>1:
    n = int(arg[1])

i=0
while True :

    payload = {"id":str(n),"Time":datetime.now().strftime("%Y-%m-%dT%H:%M:%S.00Z"),"ResultValue":1.0,"ResultType":"integer","Datastream":{"id":str(n)}}

    os.system( "mosquitto_pub -h "+host+" -t "+("/"+str(payload["id"])+" -m " +str(json.dumps(json.dumps(payload)))+"")

Consumer.java

package eu.linksmart.testing;

import org.eclipse.paho.client.mqttv3.*;
import org.eclipse.paho.client.mqttv3.persist.MemoryPersistence;

import java.util.UUID;

public class Application implements MqttCallback {
    public Application() {
        id++;
    }

    public static void main(String[] args) {

        try {

            Application app = new Application();
            create("1",new Application());
            create("2",new Application());

            while (true)
                try {
                    Thread.sleep(30000);
                } catch (InterruptedException e) {
                    e.printStackTrace();
                }

        } catch (MqttException e) {
            e.printStackTrace();
        }

    }
    static void create(String id, Application app) throws MqttException {
        MqttClient mqttClient =  new MqttClient("tcp://broker:1883", UUID.randomUUID().toString(), new MemoryPersistence());
        mqttClient.connect();
        mqttClient.subscribe("/"+id+"/#", 1);

        mqttClient.setCallback(app);
    }
    long acc =0;
    int i=0;
    long start= System.nanoTime();
    static  int id=0;
    @Override
    public void connectionLost(Throwable throwable) {

    }

    @Override
    public void messageArrived(String s, MqttMessage mqttMessage) throws Exception {

        i++;
        acc = (System.nanoTime()-start);
        if(acc/1000000>1000){
            start = System.nanoTime();
            System.out.println(String.valueOf((i * 1000000000.0) / acc));
            acc =0;
            i=0;
        }
    }

    @Override
    public void deliveryComplete(IMqttDeliveryToken iMqttDeliveryToken) {

    }

}

E.g。运行主题1的生产者：

python Producers.py 1&

什么限制了Java应用程序中的paho客户端？

Answer 1

经过大量的调试后，我发现了问题所在。

主题$SYS/broker/load/messages/received/1min在我发送时报告了更多消息。可能将协议消息计为消息。因此，在空闲时，该主题是向一个订户报告3.22。所以我认为我发送了每分钟1459.5055，这是由mosquitto报道的。但我只发送了485.5458333333333。

所以不要相信这个主题的应用程序消息有效载荷！

Paho客户端限制？

1 个答案: