如何向Sequelize模型添加大量数据?

时间:2013-05-27 01:42:16

标签: mysql node.js sequelize.js

我有很多.txt文件,其中每行都有一些我想要添加到模型的数据,以便它可以为查询做好准备。问题是没有任何“插入”查询正在执行,可能是由于库的异步性。

这就是我所拥有的:

// Connect to DB
// Set up Model
// Model.sync()

// first for loop (for each .txt)
// second for loop (nested) (for each line in the .txt)
// in second for loop: Model.create(data);

如何确保每个数据对象都成功添加到数据库中?

以下是代码:

var Location = sequelize.define('Location', {
  name: Sequelize.STRING,
  country: Sequelize.STRING,
  lat: Sequelize.STRING,
  long: Sequelize.STRING
});
Location.sync().success(function(){
  for (var i = 0; i < txts.length; i++){
    var txt = txts[i],
      country = txt.substr(0, txt.indexOf('.')),
      data = fs.readFileSync(dir +"/" + txt, 'utf-8'),
      locations = data.split('\n');

    for (var j =1; j < locations.length; j++){
      var loc = locations[j],
        chunks = _.without(loc.split('\t'), ''),
        lat = chunks[3],
        long = chunks[4],
        name = chunks[16]

      Location.build({
        country: country,
        lat: lat,
        long: long,
        name: name
      })
        .save()
        .success(function(){
          console.log('success');
        })
        .error(function(err){
          if (err) throw err;
        });
    }

 }

我尝试使用lodash的forEach方法遍历循环,但这两种方法似乎都跳过了Location.build()

1 个答案:

答案 0 :(得分:0)

很难说没有看到实际代码,但尝试使用fs.readFileSync或者最好使用async.each或async.auto作为循环,以便外循环实际上在内循环执行之前完成。