Gzip和子进程'在python中的stdout

时间:2010-05-17 22:26:35

标签: python gzip subprocess

我正在使用python 2.6.4并发现我不能像我希望的那样使用gzip和子进程。这说明了问题:

May 17 18:05:36> python
Python 2.6.4 (r264:75706, Mar 10 2010, 14:41:19)
[GCC 4.1.2 20071124 (Red Hat 4.1.2-42)] on linux2
    Type "help", "copyright", "credits" or "license" for more information.

>>> import gzip
>>> import subprocess
>>> fh = gzip.open("tmp","wb")
>>> subprocess.Popen("echo HI", shell=True, stdout=fh).wait()
0
>>> fh.close()
>>>
[2]+  Stopped                 python
May 17 18:17:49> file tmp
tmp: data
May 17 18:17:53> less tmp
"tmp" may be a binary file.  See it anyway?
May 17 18:17:58> zcat tmp

zcat: tmp: not in gzip format

这里的内容不那么

HI
^_<8B>^H^Hh<C0><F1>K^B<FF>tmp^@^C^@^@^@^@^@^@^@^@^@

它看起来像是作为文本放入stdout然后放入一个空的gzip文件。实际上,如果我删除“Hi \ n”,那么我得到了这个:

May 17 18:22:34> file tmp
tmp: gzip compressed data, was "tmp", last modified: Mon May 17 18:17:12 2010, max compression

这里发生了什么?

更新 之前的问题是同样的问题:Can I use an opened gzip file with Popen in Python?

4 个答案:

答案 0 :(得分:7)

您不能使用subprocess的文件,只能使用真实文件。 fileno() GzipFile方法返回底层文件的FD,这就是echo重定向到的内容。然后GzipFile关闭,写一个空的gzip文件。

答案 1 :(得分:3)

只是管道那个吸盘

from subprocess import Popen,PIPE
GZ = Popen("gzip > outfile.gz",stdin=PIPE,shell=True)
P = Popen("echo HI",stdout=GZ.stdin,shell=True)
# these next three must be in order
P.wait()
GZ.stdin.close()
GZ.wait()

答案 2 :(得分:1)

我不完全确定为什么这不起作用(也许输出重定向不是调用python的写,这是gzip的工作原理?)但是这样可行:

>>> fh.write(subprocess.Popen("echo Hi", shell=True, stdout=subprocess.PIPE).stdout.read())

答案 3 :(得分:-1)

您无需使用subprocess来撰写gzip.GzipFile。相反,像任何其他类似文件的对象一样写入它。结果是自动gzip压缩!

import gzip
with gzip.open("tmp.gz", "wb") as fh:
    fh.write('echo HI')