在Python中读取和解释二进制文件中的数据

时间:2010-10-15 14:23:50

标签: python binary bitwise-operators

我想逐字节读取文件并检查每个字节的最后一位是否设置:

#!/usr/bin/python

def main():
    fh = open('/tmp/test.txt', 'rb')
    try:
        byte = fh.read(1)
        while byte != "":
            if (int(byte,16) & 0x01) is 0x01:
                print 1
            else:
                print 0
            byte = fh.read(1)
    finally:
        fh.close

    fh.close()

if __name__ == "__main__":
        main()

我得到的错误是:

Traceback (most recent call last):
  File "./mini_01.py", line 21, in <module>
    main()
  File "./mini_01.py", line 10, in main
    if (int(byte,16) & 0x01) is 0x01:
ValueError: invalid literal for int() with base 16: '\xaf'

有人有想法吗?我没有成功使用struct和binascii模块。

3 个答案:

答案 0 :(得分:39)

尝试使用bytearray类型(Python 2.6及更高版本),它更适合处理字节数据。您的try阻止只是:

ba = bytearray(fh.read())
for byte in ba:
    print byte & 1

或创建结果列表:

low_bit_list = [byte & 1 for byte in bytearray(fh.read())]

这是有效的,因为当您索引bytearray时,您只需返回一个整数(0-255),而如果您只是从文件中读取一个字节,则会返回一个字符串,因此需要使用{ {3}}将其转换为整数。


如果你的文件太大而不能舒服地保留在内存中(虽然我猜不是),那么可以使用ord从缓冲区创建bytearray

import mmap
m = mmap.mmap(fh.fileno(), 0, access=mmap.ACCESS_READ)
ba = bytearray(m)

答案 1 :(得分:7)

您想使用ord代替int

if (ord(byte) & 0x01) == 0x01:

答案 2 :(得分:4)

一种方式:

import array

filebytes= array.array('B')
filebytes.fromfile(open("/tmp/test.txt", "rb"))
if all(i & 1 for i in filebytes):
    # all file bytes are odd

另一种方式:

fobj= open("/tmp/test.txt", "rb")

try:
    import functools
except ImportError:
    bytereader= lambda: fobj.read(1)
else:
    bytereader= functools.partial(fobj.read, 1)

if all(ord(byte) & 1 for byte in iter(bytereader, '')):
    # all bytes are odd
fobj.close()