如何解析用户在node / express中上传的csv文件中的数据?

时间:2018-08-08 05:00:50

标签: node.js express multer node-csv-parse

我有一个前端React应用程序和一个后端节点/表达应用程序。我想允许用户上传一个csv文件,然后解析该文件并为每行实例化一个模型。但是,我对如何执行此操作感到有些困惑,因为我习惯于简单地将其发布到API中的路由,并将其保留在请求正文中。在这种情况下,请求主体中的内容就是文件,我不想保存文件,而只是保存其中的数据。如何解析文件而不将其保存到数据库?我尝试使用multer处理上载,然后使用csv-parse解析内容,但是我不确定这是否有意义。尽管如此,这是代码(应用程序/索引):

               ...
const multer  = require('multer');
const upload = multer().single();
const parse = require('csv-parse'); 
               ...

router.post('/distributor/:id/files', (req,res) => { 
  upload(req, res, function (err) {
    if (err) {
      console.error("An error occurred when uploading. Please try again. Note 
      that you may only upload one file at a time, and we only support .csv 
      files.")
      return
    }
    console.log("We have received your file")
  })
});  
                         ... 

// router.get('/distributor/:id/files/:id', (req, res) => { 
//   File
//     .forge({id: req.params.id})
//     .fetch()
//     .then((file) => {
//       if (_.isEmpty(file))
//         return res.sendStatus(404);
//       return parseJson(file)
//     })
//     .then((jsonData) => { 
//       for (var i in jsonData) { 
//         //save instance of model
//       }
//     })
//     .catch((error) => {
//       console.error(error);
//       return res.sendStatus(500);
//     });
// }) 

// function parseJson(file) { 
//     var output = [];
//       // Create the parser
//     var parser = parse({delimiter: ':'});
//     // Use the writable stream api
//     parser.on('readable', function(){
//       while(record = parser.read()){
//         output.push(record);
//       }
//     });
//     // Catch any error
//     parser.on('error', function(err){
//       console.log(err.message);
//     });
//     parser.end(); 
// } 

我知道这没有任何意义,因为我实际上并不希望将文件另存为数据库中的模型和表格,所以我只想将文件中的每个项目都保存下来,所以我知道我无法称为“ / distributor /:id / files /:id”的路由。但是我不知道该怎么做。我希望我想做的清楚!我对节点和一般的程序设计还很陌生,从来没有遇到需要处理文件上传的情况。

1 个答案:

答案 0 :(得分:0)

您可以使用此节点模块来解析csv文件。 https://www.npmjs.com/package/csvtojson

例如,您在请求对象中具有文件名users

const csv=require('csvtojson');

csv()
.fromString(req.files.users.data.toString('utf8'))
.on('json', (user) => {
    console.log(user);
})
.on('done', () => {
    console.log('done parsing');
});

您将能够以json对象的形式获取每一行。