服务器每周会产生一次全局备份文件,大小约100G左右,需要定期清理。
工作时间网站访问大,服务器I/O高的时候删除大数据会对服务器状态产生不好的影响。
于是想利用计划任务自动执行。
在我的备份目录/bakcup下,每次备份文件均以日期形式命名目录名: 代码如下: # ls 2013-12-23 2014-01-06 2014-01-20 2014-02-03 2013-12-30 2014-01-13 2014-01-27 2014-02-10 删除部分备份同时保留部分,可以使用find命令,如我要保留最近四周备份的文件,每次备份间隔七天: 代码如下: # find /bakcup/ -maxdepth 1 -type d -mtime 28 /bakcup/2014-01-06 /bakcup/2014-01-13 /bakcup/2013-12-23 /bakcup/2013-12-30 -maxdepth 1:设置查找目录深度为1,只在/backup目录下查找,如不加此参数会将下级目录中的文件都列出 -type d:设置查找类型为目录 -mtime 28:查找28天前的目录 查找结束后可用-exec参数连接删除命令 代码如下: rsync --delete-before -d /data/test/ {} \; 所以,整个命令就是: 代码如下: # find /bakcup/ -maxdepth 1 -type d -mtime 28 -exec rsync --delete-before -d /data/test/ {} \; p 最后可以把命令放入脚本,设置crontab自动执行。
提醒: 使用命令前,应先在服务器上试用查找部分的命令,如只查找出要清理的目录,则可以继续。
不排除某些系统会将./目录查找出来,一定要看清楚,防止出现意外情况。
另外可将-exec替换为-ok,效果相同,在删除前提醒用户确认。
PS:rm命令与rsync命令的效率比较 rm rm命令大量调用了lstat64和unlink,可以推测删除每个文件前都从文件系统中做过一次lstat操作。
lstat64的次数低于文件总数,还有另外的原因,之后会在另一篇文章中说明。
getdirentries64这个调用比较关键。
过程:正式删除工作的之一阶段,需要通过getdirentries64调用,分批读取目录(每次大约为4K),在内存中建立rm的文件列表;第二阶段,lstat64确定所有文件的状态;第三阶段,通过unlink执行实际删除。
这三个阶段都有比较多的系统调用和文件系统操作。
rsync rsync所做的系统调用很少。
没有针对单个文件做lstat和unlink操作。
命令执行前期,rsync开启了一片共享内存,通过mmap方式加载目录信息。
只做目录同步,不需要针对单个文件做unlink。
另外,在其他人的评测里,rm的上下文切换比较多,会造成System CPU占用较多对于文件系统的操作,简单增加并发数并不总能提升操作速度。
程序的自删除早已经不是什么新鲜的话题了,对于各位大虾来说是更是比较容易的事情,但想想自己刚学时遇到的种种错误,我觉得有必要把自己所知道的各种方法总结一下,希望对新手的学习能够有所帮助。 程序的自删除...
11月11日,天猫商城及淘宝总裁蒋凡在阿里巴巴网杭州市总公司发布演说表明,今年是第一年淘宝直播间成双十一最流行消费方式,天猫商城有一半的知名品牌店家在双十一当日开直播。据淘宝网公布数据信息表明,双十一...
本文目录一览: 1、谁给我一个黑客帝国动态数字雨大图桌面壁纸? 2、安卓手机被莫名其妙换了桌面壁纸,是被黑客入侵了吗 3、4月7日《非你莫属》嘉宾黑客「王鑫」的发展如何?,, 谁给我一个黑客...
天猫店出让能够让许多没法根据自我推荐进驻的店家变成天猫店铺主,这实际上一条近道,愈来愈多的人意识到一个淘宝动态评分标红无假冒商品违反规定的店面针对初学者商家而言是多么的关键,很多人是满怀忐忑不安的...
LOL怎么在游戏里回复好友?LOL回复好友私聊的快捷键是什么?小编今天来教大家怎么在游戏中回复好友,有时候我们在游戏中好友问我们一些事情,我们没有及时回复或者不会回复可能会让好友误会,今天小编就来教教...
餐饮市场需求庞大,使得各大行业都在不绝的成长,而甜品行业也是成长迅速,致使不少的品牌呈此刻人们的糊口傍边,但是让想要创业投资的人就犯了难,不知道该如何选择。其实甜品店加盟就是一个很不错的品牌,因为人人...