在Heroku应用程序的AWS RDS上使用postgres DB上的控制器时出现问题

时间:2016-11-11 05:46:42

标签: ruby-on-rails postgresql heroku postgis rds

我已经设置了一个postgres数据库来使用postgis来运行我在Ruby on Rails上运行的Heroku应用程序。

我的步骤是:

  1. 创建运行第9.4.9行的RDS数据库
  2. 在RDS参数组上启用rds.force_ssl。
  3. 备份并将我的Heroku数据库加载到新的postgres数据库中。
  4. 下载Amazon RDS CA证书并将其放在config / amazon-rds-ca-cert.pem下。
  5. 将gem'activerecord-postgis-adapter'添加到我的gem文件中。
  6. 将database.yml文件更新为以下内容:
  7. default: &default
        adapter: postgis
        encoding: unicode
        pool: 5
    
    production:
        <<: *default
        encoding: utf8
        database: <%= ENV['RDS_DB_NAME'] %>
        username: <%= ENV['RDS_USERNAME'] %>
        password: <%= ENV['RDS_PASSWORD'] %>
        host: <%= ENV['RDS_HOSTNAME'] %>
        port: <%= ENV['RDS_PORT'] %>
        postgis_extension: postgis
        schema_search_path: public,postgis
    
    1. 将Heroku上的DATABASE_URL参数更新为postgres:// myuser:mypassword@mydbinstance.xxxxxxxxxxx.us-west-2.rds.amazonaws.com/mydbname?sslmode = verify-full&amp; sslrootcert = config / amazon-rds-ca -cert.pem
    2. 这个非常有用的问题中的其他步骤:Enabling Ruby PostGIS support on Heroku
    3. 推送更新的代码并访问我的应用程序。
    4. 当我尝试访问数据库以验证连接时,它可以正常工作:

      nc -zv mydbinstance.xxxxxxxx.us-west-2.rds.amazonaws.com 5432
      Connection to mydbinstance.xxxxxxxxx.us-west-2.rds.amazonaws.com 5432 port [tcp/postgresql] succeeded!
      

      当我在应用程序上导航时,我能够看到查询结果。但是,当我尝试使用使用postgis的模型时,某种程度上我的连接无法正常工作。这是我的Controller代码,它存储lat,lng对和公共汽车站信息,并找到接近参数中给出的点的那些:

      class TransitStopsController < ApplicationController
          def create
          end
      
          def show
              @transit_stop = TransitStop.find(params[:id])
              @transit_routes = @transit_stop.transit_routes
          end
      
          def get_nearby_stops
              radius_in_meters = params[:radius_in_meters].nil? ? 3219 : params[:radius_in_meters]
              @nearby_stops = TransitStop.close_to(params[:lat], params[:lng], radius_in_meters)
          end
      end
      

      我的模特:

      class TransitStop < ActiveRecord::Base
        has_many :transit_stops_transit_routes, foreign_key: "onestop_id", class_name: "TransitStopsTransitRoute"
        has_many :transit_routes, through: :transit_stops_transit_routes, foreign_key: "route_onestop_id", class_name: "TransitRoute"
        validates_uniqueness_of :onestop_id
      
        #Get transit stops close to a given lat, lng pair. Default distance = 2 miles
        scope :close_to, -> (lat, lng, distance_in_meters = 3219) {
        where(%{
          ST_DWithin(
            ST_GeographyFromText(
                'SRID=4326;POINT(' || transit_stops.lng || ' ' || transit_stops.lat || ')'
              ),
              ST_GeographyFromText('SRID=4326;POINT(%f %f)'),
              %d
            )
          } % [lng, lat, distance_in_meters])
        }
      end
      

      和我的观点(get_nearby_stops.jbuilder):

      json.nearby_stops @nearby_stops do |transit_stop|
        json.region_id transit_stop.region_id
        json.lat transit_stop.lat
        json.lng transit_stop.lng
        json.onestop_id transit_stop.onestop_id
        json.name transit_stop.name
        json.osm_way_id transit_stop.osm_way_id
        json.osm_way_id transit_stop.served_by_vehicle_types
        json.timezone transit_stop.timezone
        json.wheelchair_boarding transit_stop.wheelchair_boarding
        json.created_or_updated_in_changeset_id transit_stop.created_or_updated_in_changeset_id
        json.transit_routes transit_stop.transit_routes
      end
      

      Routes.rb已将行添加到访问方法:

      get 'transit_stops/get_nearby_stops' => 'transit_stops#get_nearby_stops'
      

      当我尝试通过https://myherokuapp.herokuapp.com/transit_stops/get_nearby_stops.json?lat=-122.49766&lng=37.71677

      访问此内容时

      我得到的只是一条消息:

      应用程序错误

      应用程序中发生错误,无法提供您的页面。如果您是应用程序所有者,请检查日志以获取详细信息。

      当我查看我的heroku日志时,我看到的是超时错误:

      app[web.1]: Processing by TransitStopsController#get_nearby_stops as JSON
      app[web.1]:   Parameters: {"lat"=>"-122.49766", "lng"=>"37.71677"}
      heroku[router]: at=error code=H12 desc="Request timeout" method=GET path="/transit_stops/get_nearby_stops.json?lat=-122.49766&lng=37.71677" host=myherokuapp.herokuapp.com request_id=1e081fdf-d0ce-4000-a6b4-4e75c176b8a2 fwd="10.0.0.1" dyno=web.1 connect=0ms service=30001ms status=503 bytes=0
      

      AWS错误日志不显示任何内容。

      对我来说奇怪的是,我可以通过连接到Heroku的rails控制台来执行相同的查询:

      irb(main):001:0> TransitStop.close_to(-122.49766,37.71677,5000)
      => #<ActiveRecord::Relation [#<TransitStop region_id: 1, lat: #<BigDecimal:7fe69f6c95c0,'-0.122504106E3',18(18)>...
      ...
      etc
      

      所以在这一点上我不明白是什么导致这个控制器只有在我通过我的视图访问它时才会失败,而不是通过控制台?如果我使用postgis方法,数据库URL是否应该不同?

      任何帮助都将受到高度赞赏。

      编辑:我已经测试了我的控制器的show方法,它运行正常:

      app<a class="jive-link-external" href="http://web.1">http://web.1</a>: Started GET "/transit_stops/s-9q8ys6puje-655johnmuirave.json" for 159.16.243.2 at 2016-11-12 19:55:16 +0000
      app<a class="jive-link-external" href="http://web.1">http://web.1</a>: Processing by TransitStopsController#show as JSON
      app<a class="jive-link-external" href="http://web.1">http://web.1</a>:   Parameters: {"id"=>"s-9q8ys6puje-655johnmuirave"}
      heroku<a href="https://forums.aws.amazon.com/">router</a>: at=info method=GET path="/transit_stops/s-9q8ys6puje-655johnmuirave.json" host=myapp.herokuapp.com request_id=15814367-5235-484b-bff9-7727a2349dd0 fwd="10.0.0.1" dyno=web.1 connect=0ms service=329ms status=200 bytes=1385
      app<a class="jive-link-external" href="http://web.1">http://web.1</a>:   Rendered transit_stops/show.json.jbuilder (107.3ms)
      app<a class="jive-link-external" href="http://web.1">http://web.1</a>: Completed 200 OK in 217ms (Views: 6.7ms | ActiveRecord: 207.4ms)<br class="jive-newline" />
      

      对我来说,转换为可能在数据库中存在一些问题来执行我正在进行的查询?查询本身应该很快,因为当我在控制台中测试它时,我几乎立即得到响应,但是可能需要更改数据库配置的某些内容?

1 个答案:

答案 0 :(得分:0)

仅供其他人查看,我的问题是在查询之后,我的视图也产生了几个额外的查询,因为该字段

transit_stop.transit_routes

是与不同表的关系。因此,对于每次产生的停止,数据库都会对我得到的每个结果执行许多其他查询。由于我的查询返回了几百个结果,最后的视图执行了几百个额外的查询,这导致了我的数据库的大量开销。

为了检测这一点,我将log_statement = all更新为我的db参数组,以便我可以看到所有活动都进入数据库。我已经更新了我的查询,通过将结果数量减少到最近的n个来更高效,最多10个,因为我对获得这么多结果没有任何用处。