在ycsb中的负载生成阶段之后如何验证数据是否已加载到mongodb?

时间:2014-12-26 07:55:54

标签: performance mongodb benchmarking ycsb

我正在尝试使用ycsb来执行mongodb的基准测试。

我已根据YCSB MongoDB

上指定的说明下载并安装了mongo db

之后我使用以下命令在mongodb中创建了名为“ycsb”的数据库

1. use ycsb 
2. db.createCollection("ycsb")

如上面的链接所指定,我运行以下命令将数据加载到ycsb DB,

./bin/ycsb load mongodb -s -P workloads/workloada -p mongodb.url=mongodb://127.0.0.1:27017 -p mongodb.database=ycsb

我只是想检查加载阶段执行,所以我没有指定其他参数。我登录屏幕下方,

root@pegdb2:~/ycsb-0.1.4# ./bin/ycsb load mongodb -s -P workloads/workloada -p mongodb.url=mongodb://127.0.0.1:27017 -p mongodb.database=ycsb
java -cp /root/ycsb-0.1.4/gemfire-binding/conf:/root/ycsb-0.1.4/infinispan-binding/conf:/root/ycsb-0.1.4/nosqldb-binding/conf:/root/ycsb-0.1.4/core/lib/core-0.1.4.jar:/root/ycsb-0.1.4/hbase-binding/conf:/root/ycsb-0.1.4/mongodb-binding/lib/mongodb-binding-0.1.4.jar:/root/ycsb-0.1.4/voldemort-binding/conf:/root/ycsb-0.1.4/jdbc-binding/conf com.yahoo.ycsb.Client -db com.yahoo.ycsb.db.MongoDbClient -s -P workloads/workloada -p mongodb.url=mongodb://127.0.0.1:27017 -p mongodb.database=ycsb -load
YCSB Client 0.1
Command line: -db com.yahoo.ycsb.db.MongoDbClient -s -P workloads/workloada -p mongodb.url=mongodb://127.0.0.1:27017 -p mongodb.database=ycsb -load
Loading workload...
Starting test.
new database url = 127.0.0.1:27017/ycsb
 0 sec: 0 operations;
mongo connection created with 127.0.0.1:27017/ycsb
java.lang.NullPointerException
 0 sec: 0 operations; [INSERT AverageLatency(us)=28568]
[OVERALL], RunTime(ms), 143.0
[OVERALL], Throughput(ops/sec), 0.0
[INSERT], Operations, 1
[INSERT], AverageLatency(us), 28568.0
[INSERT], MinLatency(us), 28568
[INSERT], MaxLatency(us), 28568
[INSERT], 95thPercentileLatency(ms), 28
[INSERT], 99thPercentileLatency(ms), 28
[INSERT], Return=1, 1
[INSERT], 0, 0
[INSERT], 1, 0
[INSERT], 2, 0
[INSERT], 3, 0
[INSERT], 4, 0
[INSERT], 5, 0
[INSERT], 6, 0
[INSERT], 7, 0
[INSERT], 8, 0
[INSERT], 9, 0
[INSERT], 10, 0
    .
    .
[INSERT], 999, 0
[INSERT], >1000, 0

在此步骤之后,我只想检查是否在DB中成功加载。我查了一下,

1. use ycsb
2. db.ycsb.find()

但搜索结果为0.这可能是一个非常简单的问题,但如果有人为我提供了加载和验证数据库中数据的正确方法,那将会很有帮助。

感谢您的帮助。

1 个答案:

答案 0 :(得分:3)

问题在于加载数据时我没有指定的一个必需参数。

mongodb.writeConcern是加载数据和运行工作负载时所需的参数。它应该具有以下值之一,

-p mongodb.writeConcern=none
-p mongodb.writeConcern=strict
-p mongodb.writeConcern=normal 

通常-p mongodb.writeConcern=strict起作用,因为它保持会话开放和一致。这也会阻止NPE错误。

在MongoDB中加载数据后,可以使用usertabledb.usertable.find()命令在db.usertable.count()表/集合中验证数据。