每当更新Amazon SQS队列时运行Ruby任务

时间:2014-08-29 11:27:09

标签: ruby cron sinatra amazon-sqs

我最近做了很多Sinatra,我认为现在是时候把它提升到一个新的水平了。任何帮助都会很高兴得到赞赏。所以这就是我想要做的事情:

每当用户发出事件时,App A就会向Amazon SQS队列抛出一个事件。每当有任何事件被扔进队列时,应用B就会完成一项任务(比如电子邮件用户使用"嘿"消息)。我从未真正与Cron Jobs合作,其他代码如下:

$sum = 1

Thread.new do # trivial example work thread
  while true do
     sleep 3
     $sum += 1
  end
end


get '/' do
    "Testing background work thread: sum is #{$sum}"
end

感谢Mark Watson(http://markwatson.com/blog/2011-11/ruby-sinatra-web-apps-with-background-work-threads.html

以下是我的疑惑:

  • "是否在Amazon Queue上执行任务更新"可能?或者我认为这是错误的方式?
  • 如何更新上述代码,使其每隔3秒自动刷新一次,而不会给出"无限循环"错误?

2 个答案:

答案 0 :(得分:2)

我建议您将申请分为两部分。一个是常规的Sinatra网络应用程序,另一个是某种后台工作者。

示例应用程序

这是您可以使用的简单的非生产工作示例。

创建一些常见的 boot.rb 文件,在其中放置"初始化"代码:

require 'bundler/setup'

# Use this to load my '.env' that contains AWS credentials
require 'dotenv'; Dotenv.load

# We are using Amazon Ruby SDK
require 'aws-sdk'

# We configure AWS Ruby SDK
AWS.config(
  access_key_id: ENV.fetch('AWS_ACCESS_KEY_ID'),
  secret_access_key: ENV.fetch('AWS_SECRET_ACCESS_KEY')
)

# We get SQS Web Service
sqs = AWS::SQS.new

QUEUE = sqs.queues[ENV.fetch('AWS_QUEUE_URL')]

简单的Sinatra网站 app.rb ,如果您访问/冒烟,则会向您的Amazon SQS发送消息。

require_relative 'boot'
require 'sinatra'

get '/smoke' do
  message = QUEUE.send_message({email: "my@email.com", at: DateTime.now}.to_json.to_s)
  "Message was sent to Amazon SQS with id #{message.id}.\n"
end

创建另一个文件 - 将其命名为 worker.rb - 将订阅您的Amazon SQS队列并提取消息。

require_relative 'boot'

QUEUE.poll do |msg|
  object = JSON.load(msg.body) rescue {}
  puts "Got your email #{object['email']} at #{object['at']}."
end

我的本​​地 .env 文件包含SQA队列的凭据和URL。

AWS_ACCESS_KEY_ID=secret
AWS_SECRET_ACCESS_KEY=secret
AWS_QUEUE_URL=https://sqs.us-west-1.amazonaws.com/...

运行

然后你只需启动你的Sinatra应用和工作人员

ruby app.rb # in one terminal
ruby worker.rb # in another terminal

如果您随后访问/smoke,您会看到类似的内容 - 这意味着该作业已安排好。

Message was sent to Amazon SQS with id 788e5e28-8055-4c8f-bb51-c634c327a021.

在你的工作终端,你会看到

Got your email my@email.com at 2014-08-29T15:20:38+02:00.

现在,您不必仅限于一名工作人员......您可以拥有任意数量的工作人员,默认情况下,只有一名工作人员会处理一条消息。另一个注意事项是我们发送JSON作为消息,这就是我在工作中使用JSON.load的原因。 Amazon SQS发送/接收纯文本消息。

答案 1 :(得分:1)

我建议您查看Shoryuken,它位于AWS SDK之上。您可以轻松地与Sinatra或任何其他Ruby应用程序集成。

get '/' do
  MyWorker.perform_async(msg)
end