perform_async在sidekiq中不起作用

时间:2015-06-06 21:15:27

标签: ruby sidekiq

我试图使用sidekiq在后台处理一些请求(它与padrino框架集成)。

我的期望是,一旦工作人员被调用,请求处理程序将立即返回给用户的答案。

为了确保它正常工作,我实现了一个工作人员,它可以打印一些消息,并在完成它的处理(模拟背景中的长处理)之前休眠大约44秒。

令我惊讶的是,请求一直停止,直到工人完成工作。只有在那之后,请求处理程序才能向用户返回答案。

起初我认为睡眠功能可能是问题所在,所以我忙着替换睡眠功能,但我有相同的行为:请求处理程序被挂起,直到工作人员完成任务。

知道为什么会这样吗?

您可以看到以下内容:

请求处理程序:

get :hardworker, map: '/hardworker' do
  logger.info "I'll call HardWorker"
  HardWorker.perform_async(44)
  logger.info "HardWorker was called"
  return "The job should still be running in background."
end

Sidekiq工人:

class HardWorker
  include Sidekiq::Worker

  def perform(count)

    logger.info "Doing hard work"
    Sidekiq.redis { |c| logger.info "redis location: [#{c.client.location }]" }

    redis_info = Sidekiq.redis { |conn| conn.info }
    logger.info "connected clients: [#{redis_info['connected_clients']}]"

    sleep count

    logger.info "hard work was done"
  end
end

redis服务器正在运行:

ps -ef | grep redis

返回

redis     1232     1  0 16:54 ?        00:00:09 /usr/bin/redis-server 127.0.0.1:6379

以及sidekiq服务器:

bundle exec sidekiq -r ./config/boot.rb -v
2015-06-06T20:31:26.207Z 3343 TID-8614g INFO: Booting Sidekiq 3.3.4 with redis options {:url=>"redis://127.0.0.1:6379/0", :concurrency=>25}

此外,根据我放入工作人员的日志,我们可以看到客户端显然已连接到redis:

INFO -  redis location: [127.0.0.1:6379]
INFO -  connected clients: [3]

sidekiq版本:3.3.4 redis服务器:2.8.4 红宝石:2.1.2p95

注意:我在padrino上安装了sidekiq web工具,并且在工作人员执行之前和之后,所有统计数据(已处理,失败,忙碌,入队,重试,计划,死亡)显示0。

可以从此处下载示例项目:https://github.com/plicatibu/sidekiq-problem.git

1 个答案:

答案 0 :(得分:4)

我找到了你的错误,在你的boot.rb文件中有这行:

require 'sidekiq/testing/inline' if RACK_ENV == 'development'

这段代码,使用Sidekiq的测试框架绕过redis并运行它几乎就像它是一个ruby类(即它不会在redis上排队)。删除该行并仅在测试套件中使用它(如果需要)。

您还需要从YML文件中删除该pid文件,您不需要它,如果这样做,它可能只适用于生产。我的2 - 删除它。

一旦你这样做,你就可以去了:

这是你的机架上有一个获取请求/ hardworker:

[2015-06-07 07:54:25] INFO  WEBrick 1.3.1
[2015-06-07 07:54:25] INFO  ruby 2.2.2 (2015-04-13) [x86_64-darwin14]
[2015-06-07 07:54:25] INFO  WEBrick::HTTPServer#start: pid=74128 port=9292
   INFO -  I'll call HardWorker
   INFO -  HardWorker was called
  DEBUG -       GET (0.0131s) /hardworker - 200 OK
::1 - - [07/Jun/2015:07:55:32 -0400] "GET /hardworker HTTP/1.1" 200 46 0.0291

这是sidekiq在后台处理该工作:

─────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────
          ss
     sss  sss         ss
     s  sss s   ssss sss   ____  _     _      _    _
     s     sssss ssss     / ___|(_) __| | ___| | _(_) __ _
    s         sss         \___ \| |/ _` |/ _ \ |/ / |/ _` |
    s sssss  s             ___) | | (_| |  __/   <| | (_| |
    ss    s  s            |____/|_|\__,_|\___|_|\_\_|\__, |
    s     s s                                           |_|
          s s
         sss
         sss

   INFO -  Running in ruby 2.2.2p95 (2015-04-13 revision 50295) [x86_64-darwin14]
   INFO -  See LICENSE and the LGPL-3.0 for licensing details.
   INFO -  Upgrade to Sidekiq Pro for more features and support: http://sidekiq.org/pro
   INFO -  Starting processing, hit Ctrl-C to stop
  DEBUG -
   INFO -
   INFO -  Doing hard work
   INFO -  redis location: [127.0.0.1:6379]
   INFO -  connected clients: [3]
   INFO -  hard work was done
   INFO -