ByteBuffer.allocateDirect()和MappedByteBuffer.load()之间的区别

时间:2009-08-04 18:03:23

标签: java unix memory nio bytebuffer

我试图通过使用MappedByteBuffer对特定文件进行内存映射来在两个或更多JVM之间实现一种共享缓存。根据规范,我看到当我们使用MappedByteBuffer.load()时,它应该将数据加载到直接缓冲区中。我对此有几个问题。

我的代码段::

RandomAccessFile file = new RandomAccessFile("file.txt","rw");
FileChannel fc = file.getChannel();
MappedByteBuffer buf5 = fc.map(MapMode.READ_WRITE, 0, fc.size());

//ByteBuffer buf6 = ByteBuffer.allocateDirect(100000000);

buf5.load();

try
{
    Class c = Class.forName("java.nio.Bits");
    Field f = c.getDeclaredField("reservedMemory");
    f.setAccessible(true);
    long reservedMemory = f.getLong(null);
    f = c.getDeclaredField("maxMemory");
    f.setAccessible(true);
    System.out.println(
            "Direct Memory Usage: "+ reservedMemory +"/"+ f.getLong(null)+"\n");
}
catch (Throwable t)
{
}
  1. 对于直接内存使用(File.txt为1 GB),上述代码的输出为0字节。但是,如果我取消注释该行......

    ByteBuffer buf6 = ByteBuffer.allocateDirect(100000000);
    

    我获得100MB的直接内存使用率。无法理解为什么会这样,为什么我没有获得任何直接内存使用(即当该行被注释掉时)

  2. 虽然上述代码的直接内存使用率为0 B,但我确实看到该进程的驻留内存(使用unix top)增加了1 GB。但如果我在盒子上做了“free -m”,我看不到内存使用量的增加。

  3. 在这两种情况下,我对内存最终的位置感到有些困惑。

    谢谢!

1 个答案:

答案 0 :(得分:24)

Direct ByteBuffers(使用ByteBuffer.allocateDirect分配的那些)与MappedByteBuffers的不同之处在于它们代表不同的内存部分,并以不同方式分配。 Direct ByteBuffers是一种访问在JVM外部分配的内存块的方法,通常使用 malloc 调用分配(尽管大多数实现可能使用高效的slab分配器)。即它只是一个指向内存块的指针。

MappedByteBuffer表示使用 mmap 调用分配的内存部分,用于执行内存映射I / O.因此,MappedByteBuffers不会像Direct ByteBuffer那样注册他们对内存的使用。

因此,虽然两者都是“直接的”,因为它们代表JVM之外的内存,但它们的目的是不同的。

顺便说一句,为了获取reservedMemory值,您反射性地调用JVM的内部方法,其实现未被任何规范所涵盖,因此无法保证该值返回的内容。可以使用来自C / C ++的NewDirectByteBuffer调用(MappedByteBuffers可能使用此函数)从JNI内部分配直接ByteBuffers,这可能不会影响reservedMemory值,该值只有在使用Java ByteBuffer.allocateDirect时才会更改。 / p>