linux緩存

linux下的緩存機制及清理buffer/cache/swap的方法梳理

1)緩存機制介紹
在Linux系統中,爲了提高文件系統性能,內核利用一部分物理內存分配出緩衝區,用於緩存系統操作和數據文件,當內核收到讀寫的請求時,內核先去緩存區找是否有請求的數據,有就直接返回,如果沒有則通過驅動程序直接操作磁盤。
緩存機制優點:減少系統調用次數,降低CPU上下文切換和磁盤訪問頻率。
CPU上下文切換:CPU給每個進程一定的服務時間,當時間片用完後,內核從正在運行的進程中收回處理器,同時把進程當前運行狀態保存下來,然後加載下一個任務,這個過程叫做上下文切換。實質上就是被終止運行進程與待運行進程的進程切換。

2)查看緩存區及內存使用情況

[root@localhost ~]# free -m
total used free shared buffers cached
Mem: 7866 7725 141 19 74 6897
-/+ buffers/cache: 752 7113
Swap: 16382 32 16350
從上面的命令結果顯示中可以看出:內存總共8G,已使用7725M,剩餘141M,不少的人都是這麼看的。
但其實這樣並不能作爲實際的使用率。因爲有了緩存機制,具體算法如下:
空閒內存=free(141)+buffers(74)+cached(6897)
已用內存=total(7866)-空閒內存
由此算出空閒內存是7112M,已用內存754M,這纔是真正的使用率,也可參考-/+ buffers/cache這行信息也是內存正確使用率。

3)緩存區分buffers和cached區別
內核在保證系統能正常使用物理內存和數據量讀寫情況下來分配緩衝區大小。
buffers用來緩存metadata及pages,可以理解爲系統緩存,例如,vi打開一個文件。
cached是用來給文件做緩存,可以理解爲數據塊緩存,例如,dd if=/dev/zero of=/tmp/test count=1 bs=1G 測試寫入一個文件,就會被緩存到緩衝區中,當下一次再執行這個測試命令時,寫入速度會明顯很快。

4)Swap用途
Swap意思是交換分區,通常我們說的虛擬內存,是從硬盤中劃分出的一個分區。當物理內存不夠用的時候,內核就會釋放緩存區(buffers/cache)裏一些長時間不用的程序,然後將這些程序臨時放到Swap中,也就是說如果物理內存和緩存區內存不夠用的時候,纔會用到Swap。
swap清理:
swapoff -a && swapon -a
注意:這樣清理有個前提條件,空閒的內存必須比已經使用的swap空間大

5)釋放緩存區內存的方法
a)清理pagecache(頁面緩存)

1

echo 1 > /proc/sys/vm/drop_caches 或者 # sysctl -w vm.drop_caches=1

  b)清理dentries(目錄緩存)和inodes

1

echo 2 > /proc/sys/vm/drop_caches 或者 # sysctl -w vm.drop_caches=2

  c)清理pagecache、dentries和inodes

1

echo 3 > /proc/sys/vm/drop_caches 或者 # sysctl -w vm.drop_caches=3

  上面三種方式都是臨時釋放緩存的方法,要想永久釋放緩存,需要在/etc/sysctl.conf文件中配置:vm.drop_caches=1/2/3,然後sysctl -p生效即可!

另外,可以使用sync命令來清理文件系統緩存,還會清理殭屍(zombie)對象和它們佔用的內存

1

sync

--------------------友情提示一下----------------------
上面操作在大多數情況下都不會對系統造成傷害,只會有助於釋放不用的內存。
但是如果在執行這些操作時正在寫數據,那麼實際上在數據到達磁盤之前就將它從文件緩存中清除掉了,這可能會造成很不好的影響。那麼如果避免這種事情發生呢?
因此,這裏不得不提一下/proc/sys/vm/vfs_cache_pressure這個文件,告訴內核,當清理inoe/dentry緩存時應該用什麼樣的優先級。

vfs_cache_pressure=100 這個是默認值,內核會嘗試重新聲明dentries和inodes,並採用一種相對於頁面緩存和交換緩存比較”合理”的比例。
減少vfs_cache_pressure的值,會導致內核傾向於保留dentry和inode緩存。
增加vfs_cache_pressure的值,(即超過100時),則會導致內核傾向於重新聲明dentries和inodes

總之,vfs_cache_pressure的值:
小於100的值不會導致緩存的大量減少
超過100的值則會告訴內核你希望以高優先級來清理緩存。

其實無論vfs_cache_pressure的值採用什麼值,內核清理緩存的速度都是比較低的。
如果將此值設置爲10000,系統將會將緩存減少到一個合理的水平。

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章