将大型csv文件导入AWS ECS容器上的Rails应用程序时出错

时间:2017-08-24 08:10:58

标签: ruby-on-rails csv amazon-web-services docker heroku

我尝试上传一个包含2700行的csv,我的服务(在A.W.S上的docker容器中运行)在几秒钟后停止运行,但上传完成(因为我的数据库中存在所有数据)。日志(cloudwatch)不显示任何错误,而是停止并重新启动服务(有时成功,有时不成功)。

我发现Heroku有一个类似的问题here,答案说Heroku在所有请求上都有30秒超时,A.W.S有类似的东西吗?如果不能解决这个问题,因为我的工作场所经常会上传CSV。

谢谢。

1 个答案:

答案 0 :(得分:0)

我建议使用sidekiq批量上传数据。它在后台完成这项工作。此外,我已经遇到了问题,即使你遇到类似的问题,即使是sidekiq也停止了,然后我会推荐上帝宝石用于监控sidekiq的目的。 关于AWS超时信息请仔细看看。 Elastic Load Balancing