通过goroutine异步发布到google pub sub

时间:2019-05-03 09:36:54

标签: google-app-engine go mux

我正在尝试通过goroutine将消息异步推送到google pub-sub,但是我遇到了以下错误 panic: not an App Engine context 我正在使用mux并具有api处理程序

n = 1百万

    func apihandler(w http.ResponseWriter, r *http.Request) {
       go createuniquecodes(n)
       return "request running in background"
    }

    func createuniquecodes(n) {
       c := make(chan string)
       go createuniquecodes(c, n)  
       for val := range c {        
           publishtopubsub(val)
       } 
   }
   func createuniquecodes(n) {
        for i := 0; i < n; i++ {
           uniquecode := some random string
           // publish to channel and pubsub
           c <- uniquecode
        }
        close(c)
   } 

func publishuq(msg string) error {
   ctx := context.Background()
   client, err := pubsub.NewClient(ctx, projectId)
   if err != nil {
     log.Fatalf("Could not create pubsub Client: %v", err)
   }
   t := client.Topic(topicName)
   result := t.Publish(ctx, &pubsub.Message{
   Data: []byte(msg),
 })
 id, err := result.Get(ctx)
 if err != nil {
    return err
}
fmt.Printf("Published a message; msg ID: %v\n", id)
return nil

}

请注意,我需要生成500万个唯一代码, 由于我是异步进行的,因此如何在go例程中定义上下文

1 个答案:

答案 0 :(得分:1)

我假设您使用的是App Engine标准(非灵活)环境。请注意,“请求处理程序(在您的情况下为apihandler)在有限的时间内生成并返回对请求的响应,typically around 60 seconds。一旦达到期限,请求处理程序即为中断”。

您要尝试在调用go createuniquecodes(n)并随后ctx := context.Background()时“中断”请求,这是not an App Engine context引起的恐慌。从技术上讲,您可以使用NewContext(req *http.Request)从原始上下文中得出有效的上下文,但是同样,在请求超时之前,您只有60s。

请查看TaskQueues,因为它们“让应用程序在用户请求之外异步执行被称为任务的工作。”