如何从Linux上的系统缓存中逐出文件?

时间:2008-10-02 11:53:52

标签: linux performance testing caching file-io

运行性能测试时,文件系统缓存命中或未命中会显着影响测试结果。因此,通常在运行此类测试之前,使用的文件将从系统缓存中逐出。如何在Linux上做到这一点?

澄清:如果可能,解决方案不应要求root权限。

5 个答案:

答案 0 :(得分:11)

作为超级用户,您可以执行以下操作:

释放pagecache:

  • echo 1>的/ proc / SYS / VM / drop_caches

要释放dentries和inode:

  • echo 2>的/ proc / SYS / VM / drop_caches

释放pagecache,dentries和inode:

  • echo 3>的/ proc / SYS / VM / drop_caches

此操作不会“丢失”任何数据(缓存在数据被删除之前写入磁盘),但是,为了确保清除所有缓存,您应首先进行同步。例如。如果您运行

,则应清除所有缓存
sync; echo 3 > /proc/sys/vm/drop_caches

正如我所说,只有超级用户(root)可以这样做。

答案 1 :(得分:10)

哈,我有答案:

#include <unistd.h>
#include <fcntl.h>
int main(int argc, char *argv[]) {
  int fd;
  fd = open(argv[1], O_RDONLY);
  fdatasync(fd);
  posix_fadvise(fd, 0,0,POSIX_FADV_DONTNEED);
  close(fd);
  return 0;
}

这是http://insights.oetiker.ch/linux/fadvise.html

答案 2 :(得分:6)

Eric Wong有一个命令行实用程序,可以很容易地调用posix_fadvise:

http://git.bogomips.org/cgit/pcu.git/tree/README

然后就像

一样简单
$ pcu-fadvise -a dontneed filename-to-evict

答案 3 :(得分:0)

关于O_DIRECT的使用:这会以另一种方式扰乱结果。内核将尝试将文件系统数据直接DMA到read()缓冲区中,因此可以将其传递给您的应用程序,而无需进行任何额外的复制。如果没有O_DIRECT,内核会将文件数据DMA到页面缓存中,并将其从页面缓存复制到read()缓冲区。

如果你的应用程序真的要在生产中使用O_DIRECT,这很好。如果您使用O_DIRECT运行性能测试,然后删除O_DIRECT进行生产,那么您的性能测试将是不现实的。

答案 4 :(得分:-1)

如果您可以将测试数据放在单独的文件系统中,那么重新安装文件系统以进行测试将为您提供空缓存。

如果您使用“user”选项在/ etc / fstab中列出测试文件系统,那么您可以在不超级用户的情况下为测试安装它