ICode9

精准搜索请尝试: 精确搜索
首页 > 其他分享> 文章详细

删除数百万文件的最快方法

2019-06-12 11:49:14  阅读:313  来源: 互联网

标签:文件 删除 temp 最快 数百万 html find delete


为什么80%的码农都做不了架构师?>>>   hot3.png

删除数百万文件的最快方法 看到一篇文章,删除一个目录下大量文件的方法。http://www.quora.com/File-Systems/How-can-someone-rapidly-delete-400-000-files 利用rsync --delete将目标文件夹以一个空的文件夹来替换。rsync功能很强大,与--exclude结合起来使用,可以选择想性的删除文件。 上篇文章《 No space left on device》http://www.ttlsa.com/html/2066.html说到了,某个程序目录产生的文件耗尽了磁盘inode数,目录大小有:88G,每个文件只有16k左右的大小。下面使用上述方法来测试下:
# yum install time
# mkdir empty_dir
# /usr/bin/time -v rsync -a --delete empty_dir/ temp/
大家可以使用下面的几种方式来对比测试下:
# find temp/ -type f -delete
# find temp/ -type f | xargs -L 100 rm 说明:-L 用从标准输入读取的指定行数的非空参数运行Command命令
# find temp/ -type f | xargs -L 100 -P 100 rm 说明: -P 同一时间运行最大处理数 
# rm -rf temp/*
如需转载请注明出处: 删除数百万文件的最快方法  http://www.ttlsa.com/html/2089.html

转载于:https://my.oschina.net/766/blog/211124

标签:文件,删除,temp,最快,数百万,html,find,delete
来源: https://blog.csdn.net/weixin_34162228/article/details/91492928

本站声明: 1. iCode9 技术分享网(下文简称本站)提供的所有内容,仅供技术学习、探讨和分享;
2. 关于本站的所有留言、评论、转载及引用,纯属内容发起人的个人观点,与本站观点和立场无关;
3. 关于本站的所有言论和文字,纯属内容发起人的个人观点,与本站观点和立场无关;
4. 本站文章均是网友提供,不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属;如您发现该文章侵犯了您的权益,可联系我们第一时间进行删除;
5. 本站为非盈利性的个人网站,所有内容不会用来进行牟利,也不会利用任何形式的广告来间接获益,纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

专注分享技术,共同学习,共同进步。侵权联系[81616952@qq.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有