如何在mongodb中搜索逗号分隔的数据

时间:2015-06-19 14:38:59

标签: regex performance mongodb mongodb-query

我有不同字段的电影数据库。 Genre字段包含逗号分隔的字符串,如:

{genre: 'Action, Adventure, Sci-Fi'}

我知道我可以使用正则表达式来查找匹配项。我也尝试过:

{'genre': {'$in': genre}}

问题是运行时间。返回查询结果需要花费大量时间。数据库有大约300K文档,我已经对'genre'字段做了正常的索引。

2 个答案:

答案 0 :(得分:3)

请使用 Map-Reduce 创建一个单独的集合,将genre存储为一个数组,其值来自拆分逗号分隔字符串,然后您可以运行Map-Reduce作业并管理输出集合上的查询。

例如,我已经为foo集合创建了一些示例文档:

db.foo.insert([
    {genre: 'Action, Adventure, Sci-Fi'},
    {genre: 'Thriller, Romantic'},
    {genre: 'Comedy, Action'}
])

然后,以下map / reduce操作将生成可以应用高效查询的集合:

map = function() {
    var array = this.genre.split(/\s*,\s*/);
    emit(this._id, array);
}

reduce = function(key, values) {
    return values;
}

result = db.runCommand({
    "mapreduce" : "foo", 
    "map" : map,
    "reduce" : reduce,
    "out" : "foo_result"
});

查询很简单,利用value字段上的多键索引查询:

db.foo_result.createIndex({"value": 1});

var genre = ['Action', 'Adventure'];
db.foo_result.find({'value': {'$in': genre}})

<强>输出

/* 0 */
{
    "_id" : ObjectId("55842af93cab061ff5c618ce"),
    "value" : [ 
        "Action", 
        "Adventure", 
        "Sci-Fi"
    ]
}

/* 1 */
{
    "_id" : ObjectId("55842af93cab061ff5c618d0"),
    "value" : [ 
        "Comedy", 
        "Action"
    ]
}

答案 1 :(得分:0)

嗯,你不能真正有效地做到这一点,所以我很高兴你使用了标签&#34;性能&#34;在你的问题上。

如果你想用&#34;逗号分隔&#34;您需要执行此操作的字符串中的数据:

如果适合使用正则表达式:

db.collection.find({ "genre": { "$regex": "Sci-Fi" } })

但效率不高。

或通过$where进行JavaScript评估:

db.collection.find(function() {
     return ( 
         this.genre.split(",")
             .map(function(el) { 
                 return el.replace(/^\s+/,"") 
             })
             .indexOf("Sci-Fi") != -1;
    )
})

效率不高,可能与上述相同。

或者更好的是可以使用索引的东西,与数组分开并使用基本查询:

{
    "genre": [ "Action", "Adventure", "Sci-Fi" ] 
}

使用索引:

db.collection.ensureIndex({ "genre": 1 })

然后查询:

db.collection.find({ "genre": "Sci-Fi" })

当你这样做的时候就是这么简单。 真的高效。

你做出了选择。