Java在文件中存储布尔数组并快速读取

时间:2015-05-11 17:50:57

标签: java arrays io boolean

我需要在文件中存储包含80,000个项目的布尔数组。我不在乎节省多少时间,我只对数组的加载时间感兴趣。 我没有尝试通过DataOutputStream存储它,因为它需要访问每个值。

我尝试通过3种方法来实现这一点,例如:

  1. 序列化布尔数组
  2. 使用BitSet代替布尔数组并将其序列化
  3. 将布尔数组转换为字节数组,其中1为真,0为适当的假,并使用ByteBuffer由FileChannel写入
  4. 为了测试通过这些方法从文件中读取,我已经循环运行了每个方法1000次。所以我得到的结果如下:

    1. 布尔数组的反序列化需要574 ms
    2. BitSet的反序列化 - 379 ms
    3. 通过MappedByteBuffer从FileChannel获取字节数组 - 170 ms
    4. 第一种和第二种方法太长,第三种方法可能根本不接近。

      也许有最好的方法来实现它,所以我需要你的建议

      修改

      每种方法都运行一次

      1. 13.8
      2. 8.71
      3. 6.46 ms appropriatively

2 个答案:

答案 0 :(得分:4)

为每个布尔值写一个字节并开发自定义解析器怎么样?这可能是最快的方法之一。 如果你想节省空间,你也可以将8个布尔值放入一个字节,但这需要一些位移操作。

这是一个简短的示例代码:

public void save() throws IOException
{
    boolean[] testData = new boolean[80000];
    for(int X=0;X < testData.length; X++)
    {
        testData[X] = Math.random() > 0.5;
    }
    FileOutputStream stream = new FileOutputStream(new File("test.bin"));

    for (boolean item : testData)
    {
        stream.write(item ? 1 : 0);
    }
    stream.close();
}

public boolean[] load() throws IOException
{
    long start = System.nanoTime();
    File file = new File("test.bin");
    FileInputStream inputStream = new FileInputStream(file);
    int fileLength = (int) file.length();

    byte[] data = new byte[fileLength];
    boolean[] output = new boolean[fileLength];

    inputStream.read(data);
    for (int X = 0; X < data.length; X++)
    {
        if (data[X] != 0)
        {
            output[X] = true;
            continue;
        }
        output[X] = false;
    }
    long end = System.nanoTime() - start;
    Console.log("Time: " + end);
    return output;
}

加载80.000布尔值需要大约2ms。 使用JDK 1.8.0_45进行测试

答案 1 :(得分:0)

所以我有一个非常相似的用例,我想对一个非常大的布尔数组进行序列化/反序列化。

我实现了这样的东西, 首先,我将布尔数组转换为整数数组只是为了合并多个布尔值(这使存储效率更高,并且位填充没有问题)
现在,这意味着我们必须构建包装器方法,该方法将提供true / false

    private boolean get (int index) {
        int holderIndex = (int) Math.floor(index/buckets);
        int internalIndex = index % buckets;
        return 0 != (container[holderIndex] & (1 << internalIndex));
    }

    private void set (int index) {
        int holderIndex = (int) Math.floor(index/buckets);
        int internalIndex = index % buckets;
        int value = container[holderIndex];
        int newValue = value | (1 << internalIndex);
        container[holderIndex] = newValue;
    }

现在要序列化和反序列化,您可以将其直接转换为字节流并写入文件。

我的源代码,用于link