linux删除大量文件的6种方法

 更新时间:2014年02月07日 10:08:17   作者:  
这篇文章主要介绍了linux删除大量文件的6种方法,需要的朋友可以参考下

首先建立50万个文件

复制代码 代码如下:

test  for i in $(seq 1 500000)
for> do
for> echo test >>$i.txt
for> done

1 rm

复制代码 代码如下:

test  time rm -f *
zsh: sure you want to delete all the files in /home/hungerr/test [yn]? y
zsh: argument list too long: rm
rm -f *  3.63s user 0.29s system 98% cpu 3.985 total

由于文件数量过多,rm不起作用。

2 find

复制代码 代码如下:

 test  time find ./ -type f -exec rm {} \;
find ./ -type f -exec rm {} \;  49.86s user 1032.13s system 41% cpu 43:19.17 total

大概43分钟。

3 find with delete

复制代码 代码如下:

 test  time find ./ -type f -delete      
find ./ -type f -delete  0.43s user 11.21s system 2% cpu 9:13.38 total

用时9分钟。

4 rsync
首先建立空文件夹blanktest

复制代码 代码如下:

 ~  time rsync -a --delete blanktest/ test/
rsync -a --delete blanktest/ test/  0.59s user 7.86s system 51% cpu 16.418 total

16s,很好很强大。

5 Python

复制代码 代码如下:

import os
import time
stime=time.time()
for pathname,dirnames,filenames in os.walk('/home/username/test'):
     for filename in filenames:
         file=os.path.join(pathname,filename)
         os.remove(file)
 ftime=time.time()
 print ftime-stime
                  

复制代码 代码如下:

 ~  python test.py
494.272291183

大概用时8分钟。

6 Perl

复制代码 代码如下:

 test  time perl -e 'for(<*>){((stat)[9]<(unlink))}'
perl -e 'for(<*>){((stat)[9]<(unlink))}'  1.28s user 7.23s system 50% cpu 16.784 total

相关文章

  • Linux命令提示符显示格式的配置方法

    Linux命令提示符显示格式的配置方法

    今天小编就为大家分享一篇Linux命令提示符显示格式的配置方法,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧
    2018-06-06
  • shell脚本联合PHP脚本采集网站的pv和alexa排名

    shell脚本联合PHP脚本采集网站的pv和alexa排名

    这篇文章主要介绍了shell脚本联合PHP脚本采集网站的pv和alexa排名,本文使用PHP脚本采集alexa网站数据,然后在shell中调用php脚本并输出数据,需要的朋友可以参考下
    2014-12-12
  • 用内置变量调试shell脚本的方法

    用内置变量调试shell脚本的方法

    这篇文章主要介绍了用内置变量调试shell脚本的方法,需要的朋友可以参考下
    2014-03-03
  • Linux中自定义shell脚本启动jar包的方法

    Linux中自定义shell脚本启动jar包的方法

    这篇文章主要介绍了Linux中自定义shell脚本启动jar包的方法,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下
    2021-01-01
  • 自己常用的一些shell脚本分享

    自己常用的一些shell脚本分享

    这篇文章主要介绍了自己常用的一些shell脚本分享,包含20多个脚本实例,需要的朋友可以参考下
    2014-08-08
  • 统计 cpu 内存 使用率的shell脚本代码

    统计 cpu 内存 使用率的shell脚本代码

    统计 cpu 内存使用率的脚本,有需要的朋友可以参考下
    2013-02-02
  • Vim中列出TODO与FIXME等备注的方法

    Vim中列出TODO与FIXME等备注的方法

    很多代码编辑器,在注释里写上 XXX TODO FIXME NOTE 关键字的话,这几个关键字是会被高亮显示的。但很多人不知道,下面这篇文章主要介绍了Vim中列出TODO与FIXME等备注的方法,文中通过示例代码介绍的非常详细,需要的朋友们下面跟着小编一起来学习学习吧。
    2017-06-06
  • Linux中mysqldump命令实例详解

    Linux中mysqldump命令实例详解

    mysqldump是mysql数据库中备份工具,用于将MYSQL服务器中的数据库以标准的sql语言的方式导出,并保存到文件中。今天通过本文给大家介绍mysqldump命令实例详解,一起看看吧
    2016-12-12
  • Shell脚本模拟多线程功能分享

    Shell脚本模拟多线程功能分享

    这篇文章主要介绍了Shell脚本模拟多线程功能分享,本文直接给出实现代码,代码中有详细的注释,需要的朋友可以参考下
    2014-11-11
  • Shell脚本的条件控制和循环语句

    Shell脚本的条件控制和循环语句

    这篇文章主要介绍了Shell脚本的条件控制和循环语句的相关资料,需要的朋友可以参考下
    2016-05-05

最新评论