图像加载python和gobject的性能问题

时间:2011-04-30 05:57:35

标签: python performance gtk gobject

我有一个带有GTK(GObject)界面的脚本,我用它来发布到我的照片博客。

我正试图通过在后台线程中加载图像来提高响应能力。

我试图从后台线程填充GdkPixbuf对象没有运气,我尝试过的所有东西都是坚固的。

作为替代方案,我以为我会在后台线程中读取文件,然后根据需要将它们推送到GdkPixbuf中。这种方法产生了一些令人惊讶且相当令人沮丧的表现结果,让我想知道我是否做了一些非常错误的事情。

我正在玩相机上轻微压缩的jpegs,它们往往大约是3.8mb。

这是原始的阻止图像加载:

pb = GdkPixbuf.Pixbuf.new_from_file(image_file)

平均大约550毫秒,不是很大,但如果你想浏览十几张图片,那就相当乏味了。

然后我把它拆开了,这里是文件:

data = bytearray(open(self.image_file).read())

这平均为15毫秒,这真的很好,但也有点担心,如果我们能在15毫秒内读取文件,那么其他535毫秒花费了多少?

顺便说一下,bytearray调用存在,因为PixBufLoader不会接受数据。

然后是Pixbuf加载:

pbl = GdkPixbuf.PixbufLoader()
pbl.write(data, len(data))
pbl.close()
pb = pbl.get_pixbuf()

平均大约1400毫秒,这比让Gtk完成所有这一切的时间长近3倍。

我在这里做错了吗?

2 个答案:

答案 0 :(得分:2)

我的猜测:你做错了什么。我刚刚将libjpeg-turbo与gdk.PixbufLoader进行了比较,发现几乎没有速度差异。我使用的代码如下。

对于libjpeg-turbo(jpegload.c):

#include <assert.h>
#include <stdio.h>
#include <stdlib.h>
#include <sys/time.h>

#include <jpeglib.h>

void decompress(FILE* fd)
{
  JSAMPARRAY buffer;
  int row_stride;
  struct jpeg_decompress_struct cinfo;
  struct jpeg_error_mgr jerr;
  cinfo.err = jpeg_std_error(&jerr);
  jpeg_create_decompress(&cinfo);
  jpeg_stdio_src(&cinfo, fd);
  jpeg_read_header(&cinfo, TRUE);
  jpeg_start_decompress(&cinfo);
  row_stride = cinfo.output_width * cinfo.output_components;
  buffer = (*cinfo.mem->alloc_sarray)
                ((j_common_ptr) &cinfo, JPOOL_IMAGE, row_stride, 1);
  while (cinfo.output_scanline < cinfo.output_height) {
    (void) jpeg_read_scanlines(&cinfo, buffer, 1);
  }
  jpeg_finish_decompress(&cinfo);
  jpeg_destroy_decompress(&cinfo);
}

int main(int argc, char** argv)
{
  long len;
  FILE *fd;
  unsigned char *buf;
  struct timeval start, end;
  int i;
  const int N = 100;
  int delta;

  /* read file to cache it in memory */
  assert(argc == 2);
  fd = fopen(argv[1], "rb");
  fseek(fd, 0, SEEK_END);
  len = ftell(fd);
  rewind(fd);
  buf = malloc(len);
  assert(buf != NULL);
  assert(fread(buf, 1, len, fd) == len);

  gettimeofday(&start, NULL);
  for(i = 0; i < N; i++) {
    rewind(fd);
    decompress(fd);
  }
  gettimeofday(&end, NULL);
  if(end.tv_sec > start.tv_sec) {
    delta = (end.tv_sec - start.tv_sec - 1) * 1000;
    end.tv_usec += 1000000;
  }
  delta += (end.tv_usec - start.tv_usec) / 1000;
  printf("time spent in decompression: %d msec\n",
         delta/N);
}

对于python gdk(gdk_load.py):

import sys
import gtk
import time

def decompress(data):
    pbl = gtk.gdk.PixbufLoader()
    pbl.write(data, len(data))
    pbl.close()
    return pbl.get_pixbuf()

data = open(sys.argv[1]).read()

N = 100
start = time.time()
for i in xrange(N):
    decompress(data)
end = time.time()
print "time spent in decompression: %d msec" % int((end - start) * 1000 / N)

测试运行结果:

$ gcc jpegload.c -ljpeg
$ ./a.out DSC_8450.JPG 
time spent in decompression: 75 msec
$ python gdk_load.py DSC_8450.JPG 
time spent in decompression: 75 msec
$ identify DSC_8450.JPG 
DSC_8450.JPG JPEG 3008x2000 3008x2000+0+0 8-bit DirectClass 2.626MB 0.000u 0:00.019

编辑:和另一次测试,这次使用gi.repostiroy

import sys
import time
from gi.repository import GdkPixbuf

def decompress(filename):
    pb = GdkPixbuf.Pixbuf.new_from_file(filename)
    return pb

N = 100
start = time.time()
for i in xrange(N):
    decompress(sys.argv[1])
end = time.time()
print "time spent in decompression: %d msec" % int((end - start) * 1000 / N)

结果:

$ python gi_load.py DSC_8450.JPG 
time spent in decompression: 74 msec

使用gi.repository的GdkPixbuf.PixbufLoader比“纯”gtk.gdk慢得多。代码:

import sys
import time
from gi.repository import GdkPixbuf

def decompress(data):
    pbl = GdkPixbuf.PixbufLoader()
    pbl.write(data, len(data))
    pbl.close()
    return pbl.get_pixbuf()

data = bytearray(open(sys.argv[1]).read())

N = 100
start = time.time()
for i in xrange(N):
    decompress(data)
end = time.time()
print "time spent in decompression: %d msec" % int((end - start) * 1000 / N)

结果:

$ python gi_load.py DSC_8450.JPG 
time spent in decompression: 412 msec

GdkPixbuf.Pixbuf.new_from_file的工作速度与纯C版一样快,即使使用gi.repository也是如此,所以你仍然要么做错了,要么期待太多。

答案 1 :(得分:1)

我用pygtk开发了一个小图像查看器。我使用PixbufLoader,但每次write()只提供N个字节。结合idle_add(),我可以在后台加载图像,而应用程序仍然响应用户输入。

以下是来源:http://guettli.sourceforge.net/gthumpy/src/ImageCache.py