python中酸洗的EOF错误

时间:2013-05-01 16:45:22

标签: python python-2.7 pickle eoferror

以下是导致此错误的代码。

发送帖子:

 data = pickle.dumps (object);

接收帖子:

 self.object = pickle.loads(data) // Erroneous line

显示的错误是

    self.object = pickle.loads(data)
EOFError

另外,为了添加细节,此错误仅发生50%的次数。其他50%的时间,没有错误!

1 个答案:

答案 0 :(得分:6)

鉴于评论,我猜测最有可能的问题,但是至少有50%的机会我猜错了,在这种情况下......告诉我,我会删除答案。

我猜你正在尝试使用流套接字,就像它是一系列消息一样。这是网络编程新手中一个非常普遍的问题。

想象一下发件人做了这样的事情:

data = pickle.dumps(object);
self.sock.sendall(data)

接收器做了这样的事情:

data = self.sock.recv(4096)
self.object = pickle.loads(data)

这可能在99%的简单测试中起作用,但在实际使用中它不起作用。您将在一次通话中收到部分消息或多封消息,或上述的一些有趣组合(如消息2的一半,消息3的全部和消息4的三分之一)。

因此,您会将部分消息传递给loads并收到错误消息,告诉您这不是一个完整的泡菜。

那不是因为任何事情都被打破了;这就是假设的工作方式。 (TCP)套接字是:一个字节序列,而不是一系列消息。除此之外你需要的任何结构,你必须构建数据。

这意味着您必须设计并实现一种协议 - 一种了解每条消息何时完成的方法。最简单的协议可能是行(显然只有在消息永远不会有未转义的换行符时才有用)和netstrings,但是任何能让你以明确的方式查看某些数据并说“这是消息0,这是消息1,等等“会工作的。

通常,这意味着将接收到的数据附加到某个缓冲区,并循环遍历该缓冲区中的消息。例如,使用行而不是:

while True:
    line = sock.recv(4096)
    do_stuff(line)

......你需要这个:

rdbuf = ''
while True:
    rdbuf += sock.recv(4096)
    lines = rdbuf.split('\n')
    rdbuf = lines[-1]
    for line in lines[:-1]:
        dostuff(line)

如果您考虑一下,这与文件没有什么不同。想象一下这段代码:

with open('foo.data', 'wb') as f:
    f.write('123')
    f.write('45')
with open('foo.data', 'rb') as f:
    while True:
        number = f.read()

这将是'12345',而不是'123'。如果你想获得'123',你需要一些知道只读3个字节的方法。坚持使用长度前缀,或者添加空格作为分隔符,或只是知道第一个数字总是3位数... 任何,但是你必须做某事