假设我们想要使用Node.js进程池,使用React呈现一些HTML。 (我不是说这是一个好主意,只是假设是这种情况,lulz)。
有没有办法将Golang的请求/响应流的引用传递给Node.js进程?我认为Node.js的集群模块使用这种技术,通过传递文件描述符或类似的东西。请注意,Node.js进程池(可能是3个进程左右)将是Golang进程的子进程。
答案 0 :(得分:6)
以下是一个非常粗略的草案,它使用一个通道来实现一个进程池,并展示了Go的io.Reader和io.Writer接口如何用于将进程和HTTP流一起插入。代码也是on the playground,便于复制粘贴。
请注意,我已经匆忙写了这篇文章,只是为了表明一般的想法。不要在生产中使用它。我确定存在错误,特别是与不完整的读取或写入有关。空闲时退出的进程也不会被处理。
package main
import (
"encoding/json"
"fmt"
"io"
"log"
"net/http"
"os"
"os/exec"
)
exec.Cmd.Stdin和exec.Cmd.Stdout分别是io.Reader和io.Writer类型。但是,我们以相反的方式对待它们更方便。 StdinPipe和StdoutPipe方法正好促进了这一点,但它们必须仅在进程开始之前调用一次。因此,我们将管道与命令本身一起存储在一个简单的包装器中。这允许我们调用nodeWrapper.Write([] byte)将数据发送到节点,并使nodeWrapper.Read()从其stdout读取。这就是我在评论中说你经常传阅读者和作家的意思。
type nodeWrapper struct {
*exec.Cmd
io.Writer // stdin
io.Reader // stdout
}
// mustSpawnNode returns a started nodejs process that executes render.js
func mustSpawnNode() nodeWrapper {
cmd := exec.Command("node", "render.js")
cmd.Stderr = os.Stderr
stdin, err := cmd.StdinPipe()
if err != nil {
panic(err)
}
stdout, err := cmd.StdoutPipe()
if err != nil {
panic(err)
}
if err := cmd.Start(); err != nil {
panic(err)
}
return nodeWrapper{cmd, stdin, stdout}
}
我们在这里使用一个简单的基于通道的环形缓冲区来实现进程池。
处理程序解析HTTP请求并提取呈现页面所需的信息。在此示例中,我们只是将请求Path传递给节点。然后我们等待一个空闲节点进程并调用render。 render将直接写入ResponseWriter。
func main() {
pool := make(chan nodeWrapper, 4) // acts as a ring buffer
for i := 0; i < cap(pool); i++ {
pool <- mustSpawnNode()
}
log.Println("listening on :3000")
log.Fatal(http.ListenAndServe(":3000", handler(pool)))
}
func handler(pool chan nodeWrapper) http.HandlerFunc {
return func(w http.ResponseWriter, r *http.Request) {
var renderArgs struct {
Path string
}
renderArgs.Path = r.URL.Path
node := <-pool
err := render(w, node, renderArgs)
if err != nil {
// Assume the node process has failed and replace it
// with a new one.
node.Process.Kill()
pool <- mustSpawnNode()
http.Error(w, err.Error(), 500)
} else {
pool <- node
}
}
}
对于渲染,我们a)想要将一些数据传递给已经运行的节点进程,b)从节点的stdout读取,更重要的是,必须知道何时停止读取。
通常我们会将Stdout设置为我们想要的编写器,然后只需运行该过程即可完成。但是在这种情况下,一旦完成渲染,该过程将不会退出,因此它也不会关闭stdout,我们需要替换通常的EOF信号。
这是我们必须发挥创意并找到适合您的解决方案的地方。我决定使用以下协议:我们将一行JSON编码数据写入节点的stdin,然后从节点的stdout解码单个JSON编码的字符串。理想情况下,我们不会将整个HTML文档缓冲在内存中,而是将其直接放在线上(通过实时写入w)。但这使Go代码和render.js保持简单。
func render(w io.Writer, node nodeWrapper, args interface{}) error {
stdinErr := make(chan error, 1)
go func() {
stdinErr <- json.NewEncoder(node).Encode(args)
}()
var html string
if err := json.NewDecoder(node).Decode(&html); err != nil {
return err
}
if _, err := fmt.Fprint(w, html); err != nil {
return err
}
return <-stdinErr
}
最后,render.js的内容:
let lineReader = require('readline').createInterface({input: process.stdin})
lineReader.on('line', (line) => {
let data = JSON.parse(line);
let html = "";
html += "<h1>Path: " + data.Path + "</h1>\n";
html += "<small>PID: " + process.pid + "</small>\n";
process.stdout.write(JSON.stringify(html)+"\n")
})