基于日期清除MongoDb中的数据逻辑

时间:2015-07-02 13:55:17

标签: node.js mongodb mongoose mongoose-populate

我无法想到以下问题的逻辑。

考虑我想将数据存储在名为 packet 的集合中的mongoose中,我可以在其中存储不同用户的数据。我想在达到某个阈值后清除数据(比如说10天)。我们知道默认情况下Mongoose为我们提供了CreatedAt和UpdatedAt字段。

假设我的数据是在2015年2月22日创建的,当前日期是2015年2月24日。我将使用PurgeData编号(用于清除数据的列)为2(两个日期之间的差异)。每天我想通过比较当前日期和CreatedAt日期之间的差异来更改PurgeData数字的值。我想每天安排此操作并删除已达到阈值的数据,以便节省内存空间。有人可以帮助我了解它的逻辑和事件的安排吗?

先谢谢

1 个答案:

答案 0 :(得分:0)

实际上没有尝试过这个,但我会建议一些逻辑,例如使用 mongo-scheduler 包计划作业,首先进行更新,然后删除违反PurgeData条件的文档。像这样(未经测试):

/*
 Scheduler Arguments

connection - mongodb connections string (i.e.: "mongodb://localhost:27017/scheduler-db") or a mongoose connection object
options - Options object
*/
var mongoose = require('mongoose');
var Scheduler = require('mongo-scheduer');
var scheduler = new Scheduler(connection, options); 
var packet = new mongoose.Schema({
    CreatedAt : {type : Date, default: Date.now},    
    PurgeData : {type : Number, index : true}
});
var Packet = mongoose.model('Packet', packet);
var moment = require('moment');

//Schedule the event.

var event = { 
    name: 'purge',
    collection: 'packet', 
    after: new Date(), 
    cron: "0 15 10 * * ?" //cron string representing a frequency - fire at 10:15am every day
};
scheduler.schedule(event)

scheduler.on('purge', function(packet, event) {
    console.log(packet.PurgeData)

    Packet.find({"PurgeData": {"$lt": 10} }, function (err, packets) {    
        packets.forEach(function (p){
            var days_diff = moment().diff(moment(p.CreatedAt), 'days') // using momentjs library
            Packet.update(
                {
                    "_id": p._id
                },
                {
                    "$set": {
                        PurgeData: days_diff
                    }
                }, function (err, doc){
                    console.log(doc);
            });
        }); 
    });

    Packet.find({"PurgeData": {"$gte": 10} }, function (err, packets) {    
        packets.forEach(function (p){       
            Packet.remove({ "_id": p._id }, function (err){
                handleErr(err);
            });
        }); 
    });
})