ByteBuffer.allocateDirect() 和 MappedByteBuffer.load() 之间的区别

2022-09-03 12:49:07

我试图通过使用内存映射特定文件来实现两个或多个JVM之间的共享缓存。从规范中我看到,当我们使用它时,它应该将数据加载到直接缓冲区中。我对此有几个问题。MappedByteBufferMappedByteBuffer.load()

我的代码片段::

RandomAccessFile file = new RandomAccessFile("file.txt","rw");
FileChannel fc = file.getChannel();
MappedByteBuffer buf5 = fc.map(MapMode.READ_WRITE, 0, fc.size());

//ByteBuffer buf6 = ByteBuffer.allocateDirect(100000000);

buf5.load();

try
{
    Class c = Class.forName("java.nio.Bits");
    Field f = c.getDeclaredField("reservedMemory");
    f.setAccessible(true);
    long reservedMemory = f.getLong(null);
    f = c.getDeclaredField("maxMemory");
    f.setAccessible(true);
    System.out.println(
            "Direct Memory Usage: "+ reservedMemory +"/"+ f.getLong(null)+"\n");
}
catch (Throwable t)
{
}
  1. 上述代码的输出为 0 字节,表示直接内存使用情况(文件.txt为 1 GB)。但是,如果我取消注释该行..

    ByteBuffer buf6 = ByteBuffer.allocateDirect(100000000);
    

    我得到的直接内存使用量为100MB。无法理解为什么会这样,至于为什么我一开始就没有得到任何直接的内存使用(即当行被注释掉时)

  2. 虽然上述代码的直接内存使用量为0 B,但我确实看到进程的驻留内存(使用unix top)增加了1 GB。但是,如果我在框中做一个“free -m”,我没有看到内存使用量的任何增加。

在这两种情况下,我对记忆的结束位置有点困惑。

谢谢!


答案 1

直接字节缓冲器(使用ByteBuffer.assignDirect分配的那些)与MappedByteBuffers的不同之处在于它们代表不同的内存部分,并且分配方式不同。直接字节缓冲器是一种访问在JVM外部分配的内存块的方法,通常通过malloc调用进行分配(尽管大多数实现可能会使用有效的slab分配器)。也就是说,它只是指向内存块的指针。

MappedByteBuffer 表示使用 mmap 调用分配的内存部分,用于执行内存映射 I/O。因此,MappedByteBuffers不会像Direct ByteBuffer那样注册他们对内存的使用。

因此,虽然两者都是“直接的”,因为它们代表JVM之外的内存,但它们的用途是不同的。

顺便说一句,为了获得保留的Memory值,您正在反射性地调用JVM的内部方法,其实现未被任何规范所涵盖,因此无法保证该值返回什么。直接字节缓冲器可以使用来自 C/C++ 的 NewDirectByteBuffer 调用从 JNI 内部分配(MappedByteBuffers 可能使用此值),这可能不会影响保留的 Memory 值,该值可能仅在使用 Java ByteBuffer.assignDirect 时更改。


答案 2