如何在aws上处理django长任务

时间:2017-08-02 21:39:02

标签: django amazon-web-services amazon-ec2

我是django和aws的初学者,我正在尝试在aws上运行我的django应用程序,我有这个视图,在视频上进行一些处理并显示加载模板,同时此过程正在运行以使用户等待,所以它需要大约3分钟或更长时间,具体取决于视频大小,它确实在开发模式下工作,但一旦在aws上,该过程在最长2700ms后停止。我怎么能在aws上执行如此长的任务?

我的观点:

######################### Call load template ###############################
def process(request):
    return render(request, 'testgif.html')
######################### Process the video and send notification email to user when process is done ###################################
def getor(request):
    # get video from s3 bucket mounted on ec2 instance
    var = Video.objects.order_by('id').last()
    v = '/mnt/s3/media/videos/' + str(var)
    # process
    subprocess.call("./step1.sh %s" % (str(v)), shell=True)
    #send email notification
    current_site = get_current_site(request)
    user = User.objects.values('username').order_by('id').last()
    us = user['username']
    subject = 'Notification of end of process.'
    message = render_to_string('notify.html', {
        'us':us,
        'domain':current_site.domain,
    })
   eml = User.objects.values('email').order_by('id').last()
   toemail = eml['email']
   email = EmailMessage(subject, message, to=[toemail])
   email.send()
   return render(request, 'endexecut.html')

我的加载模板:

{% extends 'base.html' %}
{% load staticfiles %}

{% block content %}
<div class="container">
    <div class="row">
         <div class="jumbotron">
              <div class="row">
                 <center>
                   <p> Please wait, your video is processing ! </p>
                   <img src="{% static "images/loading1.gif" %}" id="image-id" width="600" height="400" />
                 </center>
               </div>
         </div>
     </div>
 </div>
{% endblock %}
{% block javascript %}
<script type="text/javascript">
  $.ajax({
     url: '/wmark/',
     type: 'GET',
     dataType: 'html',
     success: function(result){
             $('#image-id').attr('src', result.image);
             $('.container').html(result);
     },
     error: function(xhr){
            alert(xhr.responseText); //Remove this when all is fine.
     }
  });
</script>
{% endblock %}

1 个答案:

答案 0 :(得分:1)

所以问题在于,一旦没有收到响应,请求/响应周期通常会终止,因此您需要做的是触发后台运行的后台任务,并在完成此过程后通过电子邮件发送给用户。

我会推荐像celery这样的东西,它允许你启动一个过程并继续中断请求/响应周期。

如果您希望在用户在页面上等待时跟踪某些内容,您还将查看可以更新“处理”进度的Web套接字。但是,一旦芹菜完成视频处理,只需发送电子邮件即可避免这项额外工作。