linux删除大批量文件

Ⅰ linux批量删除文件

使用rm命令，可以删除文件和目录，也可以删除多个文件 。

rm命令的一般形式为：rm [选项]... 目录... 删除指定的<文件>(即解除链接)。
-d --directory 删除可能仍有数据的目录 (只限超级用户)

-f --force 略过不存在的文件，不显示任何信息，强制删除

-i --interactive 进行任何删除操作前必须先确认

-r/R --recursive 同时删除该目录下的所有目录层

-v --verbose 详细显示进行的步骤

--help 显示此帮助信息并离开

--version 显示版本信息并离开

Ⅱ 如何在Linux中删除超大的（100

通常，要在 Linux 终端删除一个文件[1]，我们使用 rm 命令（删除文件）、shred 命令（安全删除文件）、wipe 命令（安全擦除文件）或者 secure-deletion 工具包（一个安全文件删除工具集合）。
我们可以使用上述任意的工具来处理相对较小的文件。如果我们想要删除超大的文件/文件夹，比如大概 100-200GB，在删除文件（I/O 调度）所花费的时间以及 RAM 占用量方面，就没有你想的那么简单。
在本教程中，我们会解释如何在 Linux 中有效率并可靠地删除大文件/文件夹。
建议阅读： 5 个在 Linux 中清空或者删除大文件的方法[2]
我们的主要目标是使用一种不会在删除大文件时拖慢系统的技术，合理地占用 I/O。我们可以用 ionice 命令实现这个目标。
在Linux 中使用 ionice 命令删除超大（200GB）文件
ionice 是一个可以对另一个程序设置或获取 I/O 调度级别和优先级的有用程序。如果没有给出参数或者只有 -p 参数，那么 ionice 将会查询该进程的当前的 I/O 调度级别以及优先级。
如果我们给出命令名称，如 rm 命令，它将使用给定的参数运行此命令。要获取或设置调度参数，请指定[进程的 PID]，如下：
# ionice -p PID
要指定名字或者调度的数字，使用（0 表示无、1 表示实时、2 表示尽力、3 表示空闲）下面的命令。
以下命令表示 rm 会属于空闲 I/O 级别，并且只在其他进程不使用的时候使用 I/O：
---- Deleting Huge Files in Linux -----# ionice -c 3 rm /var/logs/syslog# ionice -c 3 rm -rf /var/log/apache
如果系统中没有很多空闲时间，那么我们希望使用尽力调度级别，并且使用低优先级：
# ionice -c 2 -n 6 rm /var/logs/syslog# ionice -c 2 -n 6 rm -rf /var/log/apache
注意：要使用安全的方法删除大文件，我们可以使用先前提到的 shred、wipe 以及 secure-deletion 工具包中的不同工具，而不是 rm 命令。

Ⅲ 如何在 Linux 中删除超大的文件

1. 通过重定向到 Null 来清空文件内容

Ⅳ linux 批量删除文件

首先建立50万个文件

复制代码代码如下:

test for i in $(seq 1 500000)
for> do
for> echo test >>$i.txt
for> done

1 rm

复制代码代码如下:

test time rm -f *
zsh: sure you want to delete all the files in /home/hungerr/test [yn]? y
zsh: argument list too long: rm
rm -f * 3.63s user 0.29s system 98% cpu 3.985 total

由于文件数量过多，rm不起作用。
2 find

复制代码代码如下:

test time find ./ -type f -exec rm {} \;
find ./ -type f -exec rm {} \; 49.86s user 1032.13s system 41% cpu 43:19.17 total

大概43分钟。

3 find with delete

复制代码代码如下:

test time find ./ -type f -delete
find ./ -type f -delete 0.43s user 11.21s system 2% cpu 9:13.38 total

用时9分钟。

4 rsync
首先建立空文件夹blanktest

复制代码代码如下:

~ time rsync -a --delete blanktest/ test/
rsync -a --delete blanktest/ test/ 0.59s user 7.86s system 51% cpu 16.418 total

16s，很好很强大。

5 Python

复制代码代码如下:

import os
import time
stime=time.time()
for pathname,dirnames,filenames in os.walk('/home/username/test'):
for filename in filenames:
file=os.path.join(pathname,filename)
os.remove(file)
ftime=time.time()
print ftime-stime

复制代码代码如下:

~ python test.py
494.272291183

大概用时8分钟。
6 Perl

复制代码代码如下:

test time perl -e 'for(<*>){((stat)[9]<(unlink))}'
perl -e 'for(<*>){((stat)[9]<(unlink))}' 1.28s user 7.23s system 50% cpu 16.784 total

Ⅳ linux 删除多个文件

只需在命令行输入：“rm文件1名称文件2名称文件n名称”即可在linux中同时删除多个文件。具体操作步骤如下：

1、首先打开linux操作系统进入到桌面。

Ⅵ Linux下查找和删除指定大小的文件

LINUX删除大于/小于固定大小的文件等

删除目录下大小为0的文件        find./ -name"*"-type f -size 0c |xargs-n1rm-f

删除当前目录下面所有 test 文件夹下面的文件    find./ -name"test"-type d -execrm-rf {} ;

删除文件夹下面的所有的.py文件        find./ -name'.py'-execrm-rf {} ;

显示当前路径下，大于50M的文件        find./ -size +50M

删除当前路径下，大于50M的文件        find./ -size +50M -execrm{} \;

参考： https://www.cnblogs.com/yuanmingzhou/p/11082966.html

Ⅶ linux 如何快速删除大量文件

用rsync删除目标目录
mkdir /tmp/blank #建空文件夹
rsync --delete-before -d /tmp/blank/ /your_directory/

Ⅷ linux服务器上如何批量删除文件

Step1.在云服务器配置FTP服务1.在root权限下，通过如下命令安装Vsftp。[root@VM_250_202_tlinux~]#yuminstallvsftpd2.在启动vsftpd服务之前，需要登录云服务器修改配置文件，将匿名登录禁用掉。打开配置文件，命令如下：[root@VM_250_202_tlinux~]#vim/etc/vsftpd/vsftpd.conf在配置文件中第11行的“anonymous_enable=YES”前面加上#号，即将匿名登录禁用。3.读取生效配置。[root@VM_250_202_tlinux~]#cat/etc/vsftpd/vsftpd.conf|grep^[^#]local_enable=YESwrite_enable=YESlocal_umask=022anon_upload_enable=YESanon_mkdir_write_enable=YESanon_umask=022dirmessage_enable=YESxferlog_enable=YESconnect_from_port_20=YESxferlog_std_format=YESlisten=YESpam_service_name=vsftpserlist_enable=YEStcp_wrappers=YES4.启动vsftpd服务。[root@VM_250_202_tlinux~]#servicevsftpdstart5.设置FTP用户账号。设置成功后，即可通过该账号登录FTP服务器。（1）设置FTP用户的账号，例如账号为“ftpuser1”，目录为/home/ftpuser1，且设置不允许通过ssh登录。[root@VM_250_202_tlinux~]#useradd-m-d/home/ftpuser1-s/sbin/nologinftpuser1（2）设置账号对应的密码，例如密码为“ftpuser1”。[root@VM_250_202_tlinux~]#passwdftpuser16.修改vsftpd的pam配置，使开发者可以通过自己设置的FTP用户帐号和密码连接到云服务器。（1）修改pam。[root@VM_250_202_tlinux~]#vim/etc/pam.d/vsftpd内容修改为：#%PAM-1.0authrequired/lib64/security/pam_listfile.soitem=usersense=denyfile=/etc/ftpusersonerr=succeedauthrequired/lib64/security/pam_unix.soshadownullokauthrequired/lib64/security/pam_shells.soaccountrequired/lib64/security/pam_unix.sosessionrequired/lib64/security/pam_unix.so（2）确认修改后的文件是否正确。[root@VM_250_202_tlinux~]#cat/etc/pam.d/vsftpd#%PAM-1.0authrequired/lib64/security/pam_listfile.soitem=usersense=denyfile=/etc/ftpusersonerr=succeedauthrequired/lib64/security/pam_unix.soshadownullokauthrequired/lib64/security/pam_shells.soaccountrequired/lib64/security/pam_unix.sosessionrequired/lib64/security/pam_unix.so（3）重启vsftpd服务，使修改生效。[root@VM_250_202_tlinux~]#:[OK]Startingvsftpdforvsftpd:[OK]Step2.上传文件到Linux云服务器1.下载并安装开源软件FileZilla请使用FileZilla的3.5.1、3.5.2版本（使用3.5.3版本的FileZilla进行FTP上传会有问题）。由于FileZilla官网上只提供了最新的3.5.3版本下载，因此建议开发者自行搜索3.5.1、3.5.2下载地址。建议的3.5.1下载地址：/filezilla.php?old_filezilla=63502.连接FTP运行FileZilla，按下图所示进行配置，配置后点击“快速链接”：配置信息说明如下：（1）主机：云服务器的公网IP（在云服务器“管理视图”页面可查看云服务器的公网IP）。（2）用户名：在Step1中设置的FTP用户的账号，这里以“ftpuser1”为例。（3）密码：在Step1中设置的FTP用户账号对应的密码，这里以“ftpuser1”为例。（4）端口：FTP监听端口，默认为“21”。3.上传文件到Linux云服务器上传文件时，鼠标选中本地文件，拖拽到远程站点，即将文件上传到了Linux云服务器。注意：云服务器FTP通道不支持上传tar压缩包后自动解压，以及删除tar包功能。