其他分享
首页 > 其他分享> > 删除数百万文件的最快方法

删除数百万文件的最快方法

作者:互联网

为什么80%的码农都做不了架构师?>>>   hot3.png

删除数百万文件的最快方法 看到一篇文章,删除一个目录下大量文件的方法。http://www.quora.com/File-Systems/How-can-someone-rapidly-delete-400-000-files 利用rsync --delete将目标文件夹以一个空的文件夹来替换。rsync功能很强大,与--exclude结合起来使用,可以选择想性的删除文件。 上篇文章《 No space left on device》http://www.ttlsa.com/html/2066.html说到了,某个程序目录产生的文件耗尽了磁盘inode数,目录大小有:88G,每个文件只有16k左右的大小。下面使用上述方法来测试下:
# yum install time
# mkdir empty_dir
# /usr/bin/time -v rsync -a --delete empty_dir/ temp/
大家可以使用下面的几种方式来对比测试下:
# find temp/ -type f -delete
# find temp/ -type f | xargs -L 100 rm 说明:-L 用从标准输入读取的指定行数的非空参数运行Command命令
# find temp/ -type f | xargs -L 100 -P 100 rm 说明: -P 同一时间运行最大处理数 
# rm -rf temp/*
如需转载请注明出处: 删除数百万文件的最快方法  http://www.ttlsa.com/html/2089.html

转载于:https://my.oschina.net/766/blog/211124

标签:文件,删除,temp,最快,数百万,html,find,delete
来源: https://blog.csdn.net/weixin_34162228/article/details/91492928