在我做運(yùn)維的職業(yè)生涯里,有超過(guò)3成的故障都是因?yàn)榇疟P被寫滿導(dǎo)致,而導(dǎo)致磁盤被寫滿的原因就是日志沒(méi)有做清理。
今天這個(gè)腳本需求很簡(jiǎn)單,就是找到/data/logs/目錄下所有以log作為后綴的文件,刪除掉60天以前的,并且對(duì)一天以前的使用gzip進(jìn)行壓縮(每一個(gè)都要壓縮)。
其實(shí),這個(gè)需求大家不要想復(fù)雜了,核心命令就是find,先給大家講幾個(gè)find的常見用法。
1)找到一個(gè)目錄下,所有"*.txt",這里需要考慮到不僅僅該目錄下,還要包括該目錄的子目錄下的*.txt,所以,你要直接 ls /dir/*.txt肯定就不合適了,如何找指定名字的文件?使用這個(gè)命令:
find /dir/ -name "*.log"
2)找到/data/下10天以前的所有文件,注意只是文件,不包括目錄哦
find/data/-type f -mtime+10
3)基于目錄層級(jí)來(lái)查找,比如查找當(dāng)前目錄下最多兩層目錄下的所有文件
find . -maxdepth 2 -type f
4)有時(shí)候,查找出文件來(lái),還需要針對(duì)這些文件做一些操作,比如備份所有.conf文件
find . -type f -name "*.conf" --exec cp {} {}.bak ;
這個(gè)--exec選項(xiàng)類似于一個(gè)循環(huán),循環(huán)對(duì)象就是前面的find出來(lái)的*.conf,每次循環(huán),對(duì)象用{}代替,最后面的; 需要使用脫義,目的就是為了實(shí)現(xiàn)循環(huán)。
除了 --exec之外,還可以使用xargs實(shí)現(xiàn),比如:
find . -type f -name "*.conf" |xargs -i cp {} {}.bak
xargs 的-i選項(xiàng),是為了遍歷循環(huán),它同樣使用 {}來(lái)代替循環(huán)對(duì)象,有時(shí)候,xargs可以不加-i,比如:
find . -name "*.txt" |xargs rm
這是因?yàn)閞m支持批量操作,比如 rm 1.txt 2.txt 3.txt ,而 mv 不支持,只能一個(gè)一個(gè)來(lái)。
再來(lái)看腳本需求,如何找到60天以前的,使用-mtime +60,除了mtime外,還有ctime和atime。我們先來(lái)看看mtime、ctime、atime是什么意思 ?
大家看上下兩次結(jié)果對(duì)比,上面是中文,下面是英文,最近訪問(wèn)時(shí)間 就是atime,最近更改時(shí)間就是mtime,指的是更改了文件內(nèi)容,最近改動(dòng)時(shí)間就是ctime,指的是更改了文件屬性。
啥是文件屬性呢,就是文件的大小啊、權(quán)限啊等信息。比如改了文件的讀寫執(zhí)行權(quán)限,那么ctime會(huì)改,再比如改了文件的所有者,ctime也會(huì)變。這里有一個(gè)規(guī)律,那就是改了文件內(nèi)容,mtime一定會(huì)變,從而ctime也一定會(huì)變。但反過(guò)來(lái),你改了ctime,并不一定會(huì)改mtime。
找到60天以前的文件,指的是要找到mtime為60天以前的文件,find 就這樣用
find -mtime +60
+60表示60天以前, 而-60則表示60天以內(nèi)。同理,找到一天以前的,那就是find -mtime +1。
根據(jù)腳本需求,還需要找到1天以前的日志進(jìn)行壓縮,要注意的是,我們不能先找到1天以前的進(jìn)行壓縮,然后再去刪除60天以前的,這個(gè)順序不合適。因?yàn)槟阋坏ゞzip壓縮了,之前的 *.log文件就沒(méi)有了,你再這樣"find -type f -name "*.log" -mtime +60"就找不到文件啦!
這里還有一個(gè)知識(shí)點(diǎn)需要給大家說(shuō)一下,就是gzip壓縮后,源文件沒(méi)有了,生成了.gz文件,這個(gè).gz的文件mtime跟源文件一樣,大家看一下
但是ctime會(huì)變,這是因?yàn)槲募笮∽兝病?/p>
最終的腳本是這樣的:
#!/bin/bash find /data/logs/ -name "*.log" -mtime +60 |xargs rm find /data/logs/ -name "*.log" -mtime +1 |xargs gzip
原來(lái),竟如此簡(jiǎn)單!
-
磁盤
+關(guān)注
關(guān)注
1文章
390瀏覽量
25834 -
日志
+關(guān)注
關(guān)注
0文章
144瀏覽量
10868 -
腳本
+關(guān)注
關(guān)注
1文章
398瀏覽量
28459
原文標(biāo)題:清理老日志這種需求太常見了
文章出處:【微信號(hào):aming_linux,微信公眾號(hào):阿銘linux】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
發(fā)布評(píng)論請(qǐng)先 登錄
iPhone手機(jī)內(nèi)存不夠用?如何清理?
黑客在入侵后,是如何完美清理日志的?
Linux應(yīng)用--日志定時(shí)清理
怎樣去打造一款智能日志模塊
reboot命令都不見了為什么會(huì)出現(xiàn)這種情況?
華為“清理”34歲以上員工?華為官方:純屬造謠!
對(duì)于大規(guī)模系統(tǒng)日志的日志模式提煉算法的優(yōu)化

如何制作一個(gè)清理計(jì)算機(jī)的批處理腳本
vivo大數(shù)據(jù)日志采集Agent設(shè)計(jì)實(shí)踐
三步教你清理NAS上無(wú)用docker文件

log4j日志框架分析

Spring Boot的日志框架使用

日志篇:模組日志總體介紹

評(píng)論