由于Linux下频繁存取文件后,物理内存会很快被用光,当程序结束后,内存不会被正常释放,而是一直作为caching.
分析一下缓存的原理和原因
以下引用http://www.wujianrong.com/archives/2007/09/linux_free.html
在Linux下查看内存我们一般用command free [root@nonamelinux ~]# free total used free shared buffers cached Mem: 386024 377116 8908 0 21280 155468 -/+ buffers/cache: 200368 185656 Swap: 393552 0 393552 下面是对这些数值的解释: 第二行(mem): total:总计物理内存的大小。 used:已使用多大。 free:可用有多少。 Shared:多个进程共享的内存总额。 Buffers/cached:磁盘缓存的大小。 第三行(-/+ buffers/cached): used:已使用多大。 free:可用有多少。 第四行就不多解释了。 区别: 第二行(mem)的used/free与第三行(-/+ buffers/cache) used/free的区别。 这 两个的区别在于使用的角度来看,第一行是从OS的角度来看,因为对于OS,buffers/cached 都是属于被使用,所以他的可用内存是8908KB,已用内存是377116KB,其中包括,内核(OS)使用+Application(X, oracle,etc)使用的+buffers+cached. 第三行所指的是从应用程序角度来看,对于应用程序来说,buffers/cached 是等于可用的,因为buffer/cached是为了提高文件读取的性能,当应用程序需在用到内存的时候,buffer/cached会很快地被回收。 所以从应用程序的角度来说,可用内存=系统free memory+buffers+cached. 如上例: 185656=8908+21280+155468 接下来解释什么时候内存会被交换,以及按什么方交换。 当可用内存少于额定值的时候,就会开会进行交换. 如何看额定值(RHEL4.0): #cat /proc/meminfo 交换将通过三个途径来减少系统中使用的物理页面的个数: 1.减少缓冲与页面cache的大小, 2.将系统V类型的内存页面交换出去, 3.换出或者丢弃页面。(Application 占用的内存页,也就是物理内存不足)。 事实上,少量地使用swap是不是影响到系统性能的。
下面是buffers与cached的区别。 buffers是指用来给块设备做的缓冲大小,他只记录文件系统的metadata以及 tracking in-flight pages. cached是用来给文件做缓冲。 那就是说:buffers是用来存储,目录里面有什么内容,权限等等。 而cached直接用来记忆我们打开的文件,如果你想知道他是不是真的生效,你可以试一下,先后执行两次命令#man X ,你就可以明显的感觉到第二次的开打的速度快很多。 实验:在一台没有什么应用的机器上做会看得比较明显。记得实验只能做一次,如果想多做请换一个文件名。 #free #man X #free #man X #free 你可以先后比较一下free后显示buffers的大小。 另一个实验: #free #ls /dev #free 你比较一下两个的大小,当然这个buffers随时都在增加,但你有ls过的话,增加的速度会变得快,这个就是buffers/chached的区别。
因为Linux将你暂时不使用的内存作为文件和数据缓存,以提高系统性能,当你需要这些内存时,系统会自动释放(不像windows那样,即使你有很多空闲内存,他也要访问一下磁盘中的pagefiles) 使用free命令 将used的值减去 buffer和cache的值就是你当前真实内存使用 |
再来说一下释放这种文件缓存的方法
[root@server ~]# sync
[root@server ~]# echo 3 > /proc/sys/vm/drop_caches
[root@server ~]# free -m
这回再用free命令查看一下内存情况。
设置了这个参数后不是一直起作用,或者是以后就不缓存了。而是只有再执行清除缓存命令的时候才生效。清除完缓存后如果继续进行文件的读取等操作,还会产生缓存。
想再次释放缓存还得执行上面的3个命令。
分享到:
相关推荐
linux下释放经常拷贝文件导致的缓存占用[归类].pdf
linux下释放经常拷贝文件导致的缓存占用.pdf
在Linux下用C语言实现文件拷贝的代码
当在文件拷贝后,再接着后面操作 ,会提示文件被占用 ,导致后面的操作异常
本函数可以实现文件的拷贝,应用在linux下
如下所示: ...以上这篇linux采用scp命令拷贝文件到本地,拷贝本地文件到远程服务器的方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持软件开发网。 您可能感兴趣的文
linux系统下实现的文件拷贝功能,从U盘SD卡,拷贝文件到Linux内置存储当中,支持文件夹拷贝
python写的可以实现linux下文件拷贝的功能
将压缩包解压后得到pscp.exe文件,拷贝到某个目录下,运行cmd,在cmd中执行远程拷贝命令。例如:pscp xxx.txt root@192.168.1.100:/home/ 就可以将文件拷贝到远程主机192.168.1.100的home目录下了
基于Linux环境下利用线程池实现大批量文件拷贝,包括文件IO操作、线程池操作
hobocopy 可以拷贝正在被电脑系统占用的文件 经测试已成功 命令行在txt文档里面
NULL 博文链接:https://buyaopa.iteye.com/blog/984278
3、HDFS的使用(读写、上传、下载、遍历、查找文件、整个目录拷贝、只拷贝文件、列出文件夹下文件、删除文件及目录、获取文件及文件夹属性等)-java 网址:...
实验课linux下实现文件复制
linux下将一个目录下的所有文件拷贝到另一个大文件中,并把大文件拆分成原来的小文件,大小,内容,名字不变
linux 下实现目录文件的拷贝 关键是拷贝目录函数 用的是递归
Linux系统U盘自动识别与文件拷贝程序源码
Linux下C语言,拷贝目录树。 可以熟悉Linux的文件结构和一些接口,
支持占用文件的拷贝,目前用的X64编译并拷贝成功,可稍作修改,改成32位编译拷贝
下面所有功能要求使用C代码实现 1,创建一个文本文件叫test.txt,里面写一段字符串,至少有10行,其中某一行包括字符...3, 再把这个文本文件拷贝一份,重命名为test.log 4, 把test.log里所有的内容打印到标准输出;