我将Firefox Add-on SDK扩展移植到WebExtensions。以前我可以访问浏览器的搜索引擎,但现在我不能,所以有用的用户建议我尝试阅读search.json.mozlz4文件,该文件包含每个已安装的引擎。但是,这个文件是带有LZ4压缩的json,它在Mozilla的own LZ4 format中,带有自定义幻数,' mozLz40 \ 0'。
之前,可以使用它来读取使用LZ4压缩的文本文件,包括mozlz4文件:
let bytes = OS.File.read(path, { compression: "lz4" });
let content = new TextDecoder().decode(bytes);
(虽然我无法找到关于"压缩"字段的文档,但它有效)
现在,使用WebExtensions,我能想出的最好的读取文件是
var reader = new FileReader();
reader.readAsText(file);
reader.onload = function(ev) {
let content = ev.target.result;
};
这不会以任何方式处理压缩。 This library处理LZ4 ,但它适用于node.js,所以我无法使用它。 [编辑:它也可以独立运行]。但是,即使我删除了自定义幻数处理,我也无法解压缩该文件,相比之下,这个Python代码可以按预期工作:
import lz4
file_obj = open("search.json.mozlz4", "rb")
if file_obj.read(8) != b"mozLz40\0":
raise InvalidHeader("Invalid magic number")
print(lz4.block.decompress(file_obj.read()))
我怎样才能在JS中做到这一点?
答案 0 :(得分:3)
经过多次试验和错误,我终于能够在WebExtension中读取和解码search.json.mozlz4文件。您可以使用node-lz4 library,但您只需要一个函数 - uncompress
(别名为decodeBlock
进行外部访问) - 所以我将其重命名为decodeLz4Block
并且包括在这里略有变化:
// This method's code was taken from node-lz4 by Pierre Curto. MIT license.
// CHANGES: Added ; to all lines. Reformated one-liners. Removed n = eIdx. Fixed eIdx skipping end bytes if sIdx != 0.
function decodeLz4Block(input, output, sIdx, eIdx)
{
sIdx = sIdx || 0;
eIdx = eIdx || input.length;
// Process each sequence in the incoming data
for (var i = sIdx, j = 0; i < eIdx;)
{
var token = input[i++];
// Literals
var literals_length = (token >> 4);
if (literals_length > 0) {
// length of literals
var l = literals_length + 240;
while (l === 255) {
l = input[i++];
literals_length += l;
}
// Copy the literals
var end = i + literals_length;
while (i < end) {
output[j++] = input[i++];
}
// End of buffer?
if (i === eIdx) {
return j;
}
}
// Match copy
// 2 bytes offset (little endian)
var offset = input[i++] | (input[i++] << 8);
// 0 is an invalid offset value
if (offset === 0 || offset > j) {
return -(i-2);
}
// length of match copy
var match_length = (token & 0xf);
var l = match_length + 240;
while (l === 255) {
l = input[i++];
match_length += l;
}
// Copy the match
var pos = j - offset; // position of the match copy in the current output
var end = j + match_length + 4; // minmatch = 4
while (j < end) {
output[j++] = output[pos++];
}
}
return j;
}
然后声明这个接收File对象(不是路径)的函数和成功/错误的回调:
function readMozlz4File(file, onRead, onError)
{
let reader = new FileReader();
reader.onload = function() {
let input = new Uint8Array(reader.result);
let output;
let uncompressedSize = input.length*3; // size estimate for uncompressed data!
// Decode whole file.
do {
output = new Uint8Array(uncompressedSize);
uncompressedSize = decodeLz4Block(input, output, 8+4); // skip 8 byte magic number + 4 byte data size field
// if there's more data than our output estimate, create a bigger output array and retry (at most one retry)
} while (uncompressedSize > output.length);
output = output.slice(0, uncompressedSize); // remove excess bytes
let decodedText = new TextDecoder().decode(output);
onRead(decodedText);
};
if (onError) {
reader.onerror = onError;
}
reader.readAsArrayBuffer(file); // read as bytes
};
然后,您可以在附加设置页面上添加一个HTML按钮,让用户搜索并选择search.json.mozlz4(在WebExtensions中,您无需在没有用户干预的情况下打开文件系统中的任何文件):
<input name="selectMozlz4FileButton" type="file" accept=".json.mozlz4">
要响应用户选择文件,请使用类似的内容,调用我们之前声明的方法(此处我不使用错误回调,但您可以):
let button = document.getElementsByName("selectMozlz4FileButton")[0];
button.onchange = function onButtonPress(ev) {
let file = ev.target.files[0];
readMozlz4File(file, function(text){
console.log(text);
});
};
我希望这有助于某人。我确实花了很多时间来处理这个简单的事情。 :)