Linux自动清理N天前目录文件


服务器每周会产生一次全局备份文件,大小约100G左右,需要定期清理。

工作时间网站访问大,服务器I/O高的时候删除大数据会对服务器状态产生不好的影响。于是想利用计划任务自动执行。


在我的备份目录/bakcup下,每次备份文件均以日期形式命名目录名:

  1. # ls 
  2. 2013-12-23  2014-01-06  2014-01-20  2014-02-03 
  3. 2013-12-30  2014-01-13  2014-01-27  2014-02-10 

删除部分备份同时保留部分,可以使用find命令,如我要保留最近四周备份的文件,每次备份间隔七天:

  1. # find /bakcup/ -maxdepth 1 -type d -mtime +28 
  2. /bakcup/2014-01-06 
  3. /bakcup/2014-01-13 
  4. /bakcup/2013-12-23 
  5. /bakcup/2013-12-30 

-maxdepth 1:设置查找目录深度为1,只在/backup目录下查找,如不加此参数会将下级目录中的文件都列出

-type d:设置查找类型为目录

-mtime +28:查找28天前的目录


查找结束后可用-exec参数连接删除命令

  1. rsync --delete-before -d /data/test/ {} \; 

此处没有使用rm,原因是rsync在删除大量文件时比rm更具优势,具体原因请参考《为什么rsync能够快速删除400000文件?》。

所以,整个命令就是:

  1. # find /bakcup/ -maxdepth 1 -type d -mtime +28 -exec rsync --delete-before -d /data/test/ {} \; 

最后可以把命令放入脚本,设置crontab自动执行。

提醒:

使用命令前,应先在服务器上试用查找部分的命令,如只查找出要清理的目录,则可以继续。

不排除某些系统会将./目录查找出来,一定要看清楚,防止出现意外情况。

另外可将-exec替换为-ok,效果相同,在删除前提醒用户确认。

相关内容