Question

我需要使用python读取firefox的indexeddb。

我使用slite3包来检索indexeddb的内容：

with sqlite3.connect(indexeddb_file) as conn:
    c = conn.cursor()
    c.execute('select * from object_data;')
    rows = c.fetchall()
    for row in rows:
        print row[2]

但是，虽然我知道数据库中的内容是字符串，但它们存储为sqlite binary blobs。有没有办法从python中读取存储为blob的字符串？

我试过了：

hex() and quote() sql方法只是将blob编码为十六进制
当我write the blob to file

更新

遵循@paa在这个问题的一个注释中指出的indexeddb实现的firefox source code中的编码方案，我在python中实现了数据库键的FF编码方法的一部分。所以，到目前为止，我只为字符串实现了它，但是为其他类型实现它会更容易：

BYTE_LENGTH = 8

def hex_to_bin(hex_str):
    """Return binary representation of hexadecimal string."""
    return str(trim_bin(int(hex_str, 16)).zfill(len(hex_str) * 4))

def byte_to_unicode(bin_byte):
    """Return unicode encoding for binary byte."""
    return chr(int(str(bin_byte), 2))

def trim_bin(int_n):
    """Return int num converted to trimmed bin representation."""
    return bin(int_n)[2:]

def decode(key):
    """Return decoded idb key."""
    decoded = key
    m = re.search("[1-9]", key)  # change for non-zero
    if m:
        i = m.start()
        typeoffset = int(key[i])
    else:
        # error
        pass
    data = key[i + 1:]
    if typeoffset is 1:
        # decode number
        pass
    elif typeoffset is 2:
        # decode date
        pass
    elif typeoffset is 3:
        # decode string
        bin_repr = hex_to_bin(data)
        decoded = ""
        for i in xrange(0, len(bin_repr), BYTE_LENGTH):
            byte = bin_repr[i:i + BYTE_LENGTH]
            if byte[0] is '0':
                byte_1 = int(byte, 2) - 1
                decoded += byte_to_unicode(trim_bin(byte_1))
            else:
                byte = byte[2:]
                if byte[1] is '0':
                    byte_127 = int(byte, 2) + 127
                    decoded += byte_to_unicode(trim_bin(byte_127))
                    i += BYTE_LENGTH
                    decoded += byte_to_unicode(bin_repr[i:i + BYTE_LENGTH])
                elif byte[1] is '1':
                    decoded += byte_to_unicode(byte)
                    i += BYTE_LENGTH
                    decoded += byte_to_unicode(bin_repr[i:i + BYTE_LENGTH])
                    i += BYTE_LENGTH
                    decoded += byte_to_unicode(bin_repr[i:i + 2])
        return decoded
    elif typeoffset is 4:
        # decode array
        pass
    else:
        # error
        pass
    return decoded

但是，我仍然无法解码indexeddb的数据字段。在我看来，他们没有使用任何复杂的方案，如密钥，因为我可以读取实际值的一些部分，当我用UTF-16编码它们时。

Answer 1

（在此输入，因为我还无法发表评论......）

对于数据本身，我一直在尝试为数据blob做同样的事情。对于我的问题，我正试图抓住JSON字符串。如果我查看我正在尝试筛选的数据库，我确实会在大多数情况下看到UTF-16编码的字符。但是有一些奇怪的情况我有这个：

“我们去”编码为7400 6800 6500 7200 6500 2000 77 [05060C] 6700 6F00。假设[05060C]编码“e”。

https://mxr.mozilla.org/mozilla-release/source/dom/indexedDB/IDBObjectStore.cpp

我正试着调查一下，看看是否有任何线索。应该在目录中有很多其他可能有用的源文件。

如何使用Python访问Firefox的内部indexedDB文件？

1 个答案: