How to deal with '/bin/rm:Argument list too long'

DBA在维护数据库的时候，oracle dump文件的数量可能会非常庞大，在处理这些dump文件的时候，直接rm 可能会遇到Argument list too long这种问题。在linux系统中，删除大量的小文件的时候，直接使用rm -rf *，花费的时间长，而且如果我们一次操作的文件数据过多就会出现Argument list too long的错误。

例：

[[email protected] adump]$ ls -l | wc -l

229007

该目录下有接近23W个文件，在我们执行统一操作的时候会出现以下的错误。

[[email protected] adump]$ rm *.aud

-bash: /bin/rm: Argument list too long

[[email protected] oemrep]$ cp adump/* testdump/

-bash: /bin/cp: Argument list too long

下面介绍删除大量文件的方法：

方法一：

使用ls+xargs方式：

ls | xargs -n 10 rm -fr

xargs就是将ls的输出，每10个为一组(以空格为分隔符)，作为rm -rf的参数；也就是说将所有文件名10个为一组，由rm -rf删除。

用这种方法删除上面的23w个文件，仅仅用了10多s

方法二：

使用reync命令，该命令删除大量大小文件都很迅速

  rsync --help | grep delete

--del                 an alias for --delete-during

--delete              delete extraneous files from destination dirs

--delete-before       receiver deletes before transfer, not during

--delete-during       receiver deletes during transfer (default)

--delete-delay        find deletions during, delete after

--delete-after        receiver deletes after transfer, not during

--delete-excluded     also delete excluded files from destination dirs

--ignore-errors       delete even if there are I/O errors

--max-delete=NUM      don't delete more than NUM files

其中--delete-before接收者在传输之前进行删除操作

1、先建立一个空目录

mkdir /data/blank

2、用rsync删除目标目录

rsync --delete-before -d -a -H -v --progress --stats /u01/app/oracle/admin/oemrep/adump  /data/blank

或者

rsync --delete-before -d /data/blank/ /var/edatacache/

这样/var/edatacache目录就被快速的清空了。

选项说明：

–delete-before 接收者在传输之前进行删除操作

–progress      在传输时显示传输过程

-a             归档模式，表示以递归方式传输文件，并保持所有文件属性

-H             保持硬连接的文件

-v             详细输出模式

–stats         给出某些文件的传输状态

-d             transfer directories without recursing

方法三：

使用find -exec命令：find .... -exec [command] {} \;

适合crontab任务，大批量删除文件较上面方法慢一些。find命令的参数比较多，使用也比较灵活。

如删除10天以前生成的文件：

find /u01/app/oracle/admin/cedb/adump -name "cedb_ora*.aud" -mtime +10 -exec rm -f {} \;

-mtime -n  n天以内

-mtime +n  n天以前

-mmin -n   n分钟以内

-mmin +n   n分钟以前   ..等等