Question

在我们的Ubuntu Linux机器上运行python Twisted应用程序时，我们遇到了可怕的“太多打开文件”的问题。在我们程序的许多地方，我们使用的是子进程Popen，如下所示：

Popen('ifconfig ' + iface, shell=True, stdin=PIPE, stdout=PIPE, stderr=STDOUT, close_fds=True)
output = process.stdout.read()

而在其他地方我们使用子进程通信：

process = subprocess.Popen(['/usr/bin/env', 'python', self._get_script_path(script_name)],
                       stdin=subprocess.PIPE,
                       stdout=subprocess.PIPE,
                       close_fds=True)
out, err = process.communicate(data)

为了关闭任何打开的文件描述符，我在两种情况下到底需要做什么？ Python文档对此不太清楚。从我收集的内容（这可能是错的），communic（）和wait（）确实会自己清理任何开放的fds。但是Popen怎么样？如果我不打电话通信或等待，我是否需要在致电Popen后明确关闭stdin，stdout和stderr？

Answer 1

根据to this source for the subprocess module (link)，如果您致电communicate，则无需关闭stdout和stderr管道。

否则我会尝试：

process.stdout.close()
process.stderr.close()

完成process对象后

。

例如，当您直接致电.read()时：

output = process.stdout.read()
process.stdout.close()

在上面的模块源中查看communicate()的定义方式，你会看到它在读取后关闭每个管道，这也是你应该做的。

Answer 2

如果您使用的是Twisted，请不要使用subprocess。如果您使用的是spawnProcess，那么您就不需要处理像这样的恼人的资源管理问题。

在子进程Popen和通信之后关闭所有文件的正确方法

2 个答案: