如果不使用,数据库会挂起

时间:2015-07-07 03:14:19

标签: postgresql go postgresql-9.4

我正在启动一个Web应用程序。在启动时工作正常,但如果我离开它(比如说,一小时)并用另一个请求命中它,查询就会挂起。我想在每次查询之后关闭它然后打开一个新的连接,但是文档明确地说“关闭数据库是很少见的,因为数据库句柄意味着很长时间并且在许多goroutine之间共享。”我做错了什么?

package main

import (
  "database/sql"
  "log"
  "net/http"
  _ "github.com/lib/pq"
)

var Db *sql.DB

func main() {
  var err error
  Db, err = sql.Open("postgres", "user=me password=openupitsme host=my.host.not.yours dbname=mydb sslmode=require")
  if err != nil {
    log.Fatal("Cannot connect to db: ", err)
  }
  http.HandleFunc("/page", myHandler)
  http.ListenAndServe(":8080", nil)
}

func myHandler(w http.ResponseWriter, r *http.Request) {
  log.Println("Handling Request....", r)
  query := `SELECT pk FROM mytable LIMIT 1`
  rows, err := Db.Query(query)
  if err != nil {
    log.Println(err)
  }
  defer rows.Close()
  for rows.Next() {
    var pk int64
    if err := rows.Scan(&pk); err != nil {
      log.Println(err)
    }
    log.Println(pk)
  }
  log.Println("Request Served...")
}

编辑#1: 我的postgres日志显示:

2015-07-08 18:10:01 EDT [7710-1] user@here LOG:  could not receive data from client: Connection reset by peer
2015-07-08 18:20:01 EDT [7756-1] user@here LOG:  could not receive data from client: Connection reset by peer

1 个答案:

答案 0 :(得分:3)

我遇到过类似的问题。在我们的例子中,问题是由位于客户端计算机和数据库之间的连接跟踪防火墙引起的。

此类防火墙会跟踪TCP级别的连接,并且为了限制资源使用,那么将超时的连接超时,这些连接在长时间内显示为非活动状态。我们在这种情况下观察到的症状与您的非常相似:在客户端,连接似乎挂起,而在服务器端,您可以看到connection reset by peer

防止这种情况的一种方法是确保启用TCP Keepalives,并确保keepalive间隔小于导致连接问题的防火墙,路由器等的超时。这由您可以在连接字符串中设置的libpq连接参数keepaliveskeepalives_idlekeepalives_intervalkeepalives_count控制。有关这些参数的说明,请参阅manual

  • keepalive确定是否启用了keepalive功能。它默认为1(已启用),因此您可能不需要指定它。
  • keepalives_idle确定发送keepalive之前的空闲时间。如果未指定此选项,则默认为操作系统的默认值。

    在Linux系统中,您可以通过检查/proc/sys/net/ipv4/tcp_keepalive_time来查看默认设置 - 在我的服务器中它被设置为7200秒,这在您的情况下会太长,因为您的观察是连接在〜之后被删除1小时。

    您可以尝试将其设置为2500秒。

Linux文档项目提供了一个有用的TCP Keepalive HOWTO文档,该文档详细描述了它们的工作原理。

请注意,并非所有操作系统都支持TCP keepalive。如果您无法在此处启用Keepalive,您可以考虑其他一些选项:

  1. 如果它在您的控制之下,请重新配置正在断开连接的防火墙/路由器,以便它不会对Postgresql客户端连接执行此操作

  2. 在应用程序级别,您可能会发送一些流量来保持数据库句柄处于活动状态 - 例如每小时左右发送一个SELECT 1;等语句。如果您的编程环境提供了连接缓存(从我收集的评论中提取),那么这可能会很棘手。