saltstack在運行的時候會在salt下面會產生無數的job的cache，必須要定期刪除，或者是把keep_jobs的時間給寫出來，不寫的花就好像我一樣的悲劇了，他會把整個服務器的inode給占滿了，導致服務器沒法正常工作了。

grep "keep_jobs" /etc/salt/master
#keep_jobs: 24

把這個給打開，不然日積月累，有沒有定期刪除job，就會導致硬盤的inode滿了，無法工作了

看下我的案例

產生沒有釋放句柄的原因： 第一線程打開文件。另一個線程將該文件刪除。就會出現給問題。將整兒進程kill掉才能釋放全部句柄。

我的根目錄的inode節點滿了，沒辦法只有自己來看看,重啟也沒用.

[[email protected] ~]# df -i
Filesystem      Inodes   IUsed  IFree IUse% Mounted on
/dev/sda3      1240320 1240320      0  100% /
tmpfs           126536       2 126534    1% /dev/shm
/dev/sda1        25688      38  25650    1% /boot
.host:/              0       0      0     - /mnt/hgfs

句柄數即文件數,而能產生大量句柄的就是var目錄下,於是寫了個for循環開始查找.

for i in `ls /var`;do find $i/ -type f|wc -l &&echo $i ;done
1
account
find: “cache/salt/master/jobs/7c/3238b58e45f242132dade0d989314a/.minions.p”: 沒有那個文件或目錄
find: “cache/salt/master/jobs/7c/3238b58e45f242132dade0d989314a/.load.p”: 沒有那個文件或目錄
find: “cache/salt/master/jobs/7c/3238b58e45f242132dade0d989314a/jid”: 沒有那個文件或目錄
find: “cache/salt/master/jobs/7c/f98bd5f094921b93d5435ea81b0414/.minions.p”: 沒有那個文件或目錄
find: “cache/salt/master/jobs/7c/f98bd5f094921b93d5435ea81b0414/.load.p”: 沒有那個文件或目錄
find: “cache/salt/master/jobs/7c/f98bd5f094921b93d5435ea81b0414/jid”: 沒有那個文件或目錄
find: “cache/salt/master/jobs/7c/afa7d7cf12cedd5e2f121536749ded/.minions.p”: 沒有那個文件或目錄
find: “cache/salt/master/jobs/7c/afa7d7cf12cedd5e2f121536749ded/.load.p”: 沒有那個文件或目錄
find: “cache/salt/master/jobs/7c/afa7d7cf12cedd5e2f121536749ded/jid”: 沒有那個文件或目錄
find: “cache/salt/master/jobs/7c/2f0ced419e95aff3fd0940303ed101/master/return.p”: 沒有那個文件或目錄
find: “cache/salt/master/jobs/7c/2f0ced419e95aff3fd0940303ed101/master/out.p”: 沒有那個文件或目錄
find: “cache/salt/master/jobs/7c/2f0ced419e95aff3fd0940303ed101/.minions.p”: 沒有那個文件或目錄
find: “cache/salt/master/jobs/7c/2f0ced419e95aff3fd0940303ed101/.load.p”: 沒有那個文件或目錄
find: “cache/salt/master/jobs/7c/2f0ced419e95aff3fd0940303ed101/jid”: 沒有那個文件或目錄
find: “cache/salt/master/jobs/7c/c8ad7fa07b55ceaf9dd4f1fa068ee4/.minions.p”: 沒有那個文件或目錄
find: “cache/salt/master/jobs/7c/c8ad7fa07b55ceaf9dd4f1fa068ee4/.load.p”: 沒有那個文件或目錄
find: “cache/salt/master/jobs/7c/c8ad7fa07b55ceaf9dd4f1fa068ee4/jid”: 沒有那個文件或目錄

找到了刪除即可完成.

本文出自 “Forand” 博客，請務必保留此出處http://853056088.blog.51cto.com/12966870/1936594

saltstcak有個坑keep_jobs必須要定期清理