Rails:如何从服务或队列中侦听/拉取?

时间:2016-03-18 09:21:32

标签: ruby-on-rails rabbitmq apache-kafka microservices

大多数Rails应用程序的工作方式是等待来自客户端的请求然后发挥其魔力。 但是,如果我想使用Rails应用程序作为微服务架构的一部分(例如)与一些非常好的通信(Serivce A将事件发送到Kafka或RabbitMQ队列和服务B - 我的Rails应用程序 - 应该监听此队列),如何调整/启动Rails应用程序以立即收听队列并由来自那里的事件触发? (这意味着初始触发器不是来自客户端,而是来自应用程序本身。)

感谢您的建议!

4 个答案:

答案 0 :(得分:11)

我只是在我的应用程序中设置RabbitMQ消息传递,并将在第二天左右实现解耦(多个,分布式)应用程序。我发现this文章非常有用(以及RabbitMQ tutorials)。以下所有代码均适用于RabbitMQ,并假设您已在本地计算机上启动并运行RabbitMQ服务器。

这是我到目前为止所做的 - 这对我有用:

  #Gemfile
  gem 'bunny'
  gem 'sneakers'

我有一个发送到队列的Publisher

  # app/agents/messaging/publisher.rb
  module Messaging
    class Publisher
      class << self

        def publish(args)
          connection = Bunny.new
          connection.start
          channel = connection.create_channel
          queue_name = "#{args.keys.first.to_s.pluralize}_queue"
          queue = channel.queue(queue_name, durable: true)
          channel.default_exchange.publish(args[args.keys.first].to_json, :routing_key => queue.name)
          puts "in #{self}.#{__method__}, [x] Sent #{args}!"
          connection.close
        end

      end
    end
  end

我使用的是这样的:

  Messaging::Publisher.publish(event: {... event details...})

然后我有了'倾听者':

  # app/agents/messaging/events_queue_receiver.rb
  require_dependency "#{Rails.root.join('app','agents','messaging','events_agent')}"

  module Messaging
    class EventsQueueReceiver
      include Sneakers::Worker
      from_queue :events_queue, env: nil

      def work(msg)
        logger.info msg
        response = Messaging::EventsAgent.distribute(JSON.parse(msg).with_indifferent_access)
        ack! if response[:success]
      end

    end
  end

'listener'将消息发送到Messaging::EventsAgent.distribute,如下所示:

  # app/agents/messaging/events_agent.rb
 require_dependency  #{Rails.root.join('app','agents','fsm','state_assignment_agent')}"

  module Messaging
    class EventsAgent
      EVENT_HANDLERS = {
        enroll_in_program: ["FSM::StateAssignmentAgent"]
      }
      class << self

        def publish(event)
          Messaging::Publisher.publish(event: event)
        end

        def distribute(event)
          puts "in #{self}.#{__method__}, message"
          if event[:handler]
            puts "in #{self}.#{__method__}, event[:handler: #{event[:handler}"
            event[:handler].constantize.handle_event(event)
          else
            event_name = event[:event_name].to_sym
            EVENT_HANDLERS[event_name].each do |handler|
              event[:handler] = handler
              publish(event)
            end
          end
          return {success: true}
        end

      end
    end
  end

按照Codetunes的说明,我有:

  # Rakefile
  # Add your own tasks in files placed in lib/tasks ending in .rake,
  # for example lib/tasks/capistrano.rake, and they will automatically be available to Rake.

  require File.expand_path('../config/application', __FILE__)

  require 'sneakers/tasks'
  Rails.application.load_tasks

  # app/config/sneakers.rb
  Sneakers.configure({})
  Sneakers.logger.level = Logger::INFO # the default DEBUG is too noisy

我打开两个控制台窗口。在第一个中,我说(让我的听众跑步):

  $ WORKERS=Messaging::EventsQueueReceiver rake sneakers:run
  ... a bunch of start up info
  2016-03-18T14:16:42Z p-5877 t-14d03e INFO: Heartbeat interval used (in seconds): 2
  2016-03-18T14:16:42Z p-5899 t-14d03e INFO: Heartbeat interval used (in seconds): 2
  2016-03-18T14:16:42Z p-5922 t-14d03e INFO: Heartbeat interval used (in seconds): 2
  2016-03-18T14:16:42Z p-5944 t-14d03e INFO: Heartbeat interval used (in seconds): 2

在第二部分,我说:

  $ rails s --sandbox
  2.1.2 :001 > Messaging::Publisher.publish({:event=>{:event_name=>"enroll_in_program", :program_system_name=>"aha_chh", :person_id=>1}})
  in Messaging::Publisher.publish, [x] Sent {:event=>{:event_name=>"enroll_in_program", :program_system_name=>"aha_chh", :person_id=>1}}!
  => :closed 

然后,回到我的第一个窗口,我看到了:

  2016-03-18T14:17:44Z p-5877 t-19nfxy INFO: {"event_name":"enroll_in_program","program_system_name":"aha_chh","person_id":1}
  in Messaging::EventsAgent.distribute, message
  in Messaging::EventsAgent.distribute, event[:handler]: FSM::StateAssignmentAgent

在我的RabbitMQ服务器中,我看到了:

enter image description here

这是一个非常小的设置,我相信在接下来的几天里我会学到很多东西。

祝你好运!

答案 1 :(得分:1)

我担心RabbitMQ至少你会需要一个客户端。 RabbitMQ实现了AMQP协议,而不是Web服务器使用的HTTP协议。正如上面提到的Sergio,Rails是一个Web框架,因此它没有内置AMQP支持。你必须使用像Bunny这样的AMQP客户端才能从Rails应用程序中订阅Rabbit队列。

答案 2 :(得分:0)

假设服务A正在向Kafka队列发送一些事件,您可以使用Rails应用程序运行后台进程,该应用程序将查找kafka队列并处理这些排队的消息。对于后台进程,你可以选择cron-job或sidekiq。

答案 3 :(得分:0)

Rails是很多东西。它的一部分处理Web请求。其他部分(ActiveRecord)不关心您是Web请求还是脚本或其他什么。 Rails本身甚至没有带有生产价值的Web服务器,你使用其他宝石(例如,if user_name in phone_catalog: print(phone_catalog[user_name]) else: print("Unknown user") 用于普通的旧Web浏览器,或thin用于传入的SOAP请求)。 Rails只为您提供基础架构/中间件,以组合有关服务器的所有部分。

除非你的队列能够以某种方式调用你的应用程序,例如以SOAP请求的形式,你需要一些能够监听你的排队系统的东西,无论是什么,并翻译新的“门票”在您的队列中进入Rails世界中的控制器操作。