首页 > 其他分享 >find 命令中使用 -exec 和xargs 区别, 以及使用案例

find 命令中使用 -exec 和xargs 区别, 以及使用案例

时间:2024-07-29 11:40:15浏览次数:9  
标签:xargs 文件名 exec 命令 参数 find

一、概念释义

find 命令是 Linux 和 Unix 系统中用于查找文件的强大工具。它允许你根据各种条件(如文件名、大小、类型、权限等)来搜索文件。在使用 find 命令时,-exec 和 xargs 是两种常用的方式来对找到的文件执行额外的命令。尽管它们的目的相似,但在使用方式和效率上存在一些关键区别。

-exec

-exec 选项允许你对 find 命令找到的每个文件执行指定的命令。-exec 后面跟的是要执行的命令,然后是 {},它是一个特殊的字符串,对于每个匹配的文件,find 命令都会将 {} 替换为相应的文件名。命令的结尾是 \; 来告诉 find 命令 -exec 的结束。

使用案例:

假设你想要找到当前目录及其子目录下所有的 .txt 文件,并对它们执行 grep 命令来搜索包含 "example" 的行。

bash复制代码
  find . -type f -name "*.txt" -exec grep "example" {} \;

xargs

xargs 命令从标准输入(stdin)构建并执行命令。当与 find 命令结合使用时,find 命令的输出(通常是文件名列表)被传递给 xargs,然后 xargs 将这些文件名作为参数传递给指定的命令。xargs 可以非常有效地处理大量的文件名,因为它可以将多个文件名组合成单个命令的参数,而不是为每个文件都执行一个单独的命令。

使用案例:

同样的,如果你想要找到所有的 .txt 文件并对它们执行 grep 命令,但这次使用 xargs

bash复制代码
  find . -type f -name "*.txt" -print0 | xargs -0 grep "example"

注意这里使用了 -print0 和 -0 选项。这是因为文件名可能包含空格、引号等特殊字符,这些字符可能会干扰命令的执行。-print0 使得 find 命令的输出以 null 字符(而不是换行符)作为文件名之间的分隔符,而 xargs -0 则告诉 xargs 期待以 null 字符作为输入项的分隔符。

区别

  1. 效率:对于大量文件,xargs 通常比 -exec 更高效,因为它减少了需要执行的命令数量(通过组合多个文件名作为单个命令的参数)。

  2. 用法:-exec 对于每个匹配的文件都执行一次指定的命令,而 xargs 则将所有匹配的文件名作为参数传递给单个命令。

  3. 处理特殊字符:在使用文件名作为参数时,如果文件名包含空格、引号等特殊字符,xargs(通过 -0 选项)和 -exec 都能处理,但 xargs 的 -0 选项提供了一种更直接、更高效的方式。

  4. 灵活性:-exec 提供了更高的灵活性,因为它允许你直接在 -exec 选项中编写复杂的命令和逻辑。然而,对于大多数简单的用例,xargs 已经足够。

 

二、xargs场景示例

1. xargs 命令详解

用途

xargs 命令用于从标准输入(stdin)构建并执行命令。它特别适用于处理由其他命令(如 findgrepecho 等)生成的输出,并将这些输出作为参数传递给另一个命令。xargs 擅长处理大量数据,因为它能够智能地将多个输入项组合成单个命令的参数,从而减少了需要执行的命令数量,提高了效率。

语法

bash复制代码
  xargs [options] [command [initial-arguments]]
  • optionsxargs 的选项,用于控制其行为。
  • command:要执行的命令。如果不指定,则默认为 echo
  • initial-arguments:传递给命令的初始参数(可选)。

常用参数

  • -0--null:输入项以 null 字符(而非空白字符)作为分隔符。这对于处理包含空格、引号等特殊字符的文件名特别有用。
  • -n max-args:指定每个命令的最大参数数量。默认情况下,xargs 会尝试将尽可能多的参数传递给命令,直到达到系统限制。
  • -I replace-str:使用 replace-str 替换输入项,允许在命令模板中指定输入项的位置。
  • -d delim:指定输入项的分隔符,默认为空白字符(空格、制表符、换行符)。

示例

  1. 使用 find 和 xargs 删除文件

    假设你想要删除当前目录及子目录下所有 .tmp 文件:

    bash复制代码
      find . -type f -name "*.tmp" -print0 | xargs -0 rm -f

    这里,-print0 使得 find 命令的输出以 null 字符分隔文件名,而 xargs -0 则告诉 xargs 期待以 null 字符作为输入项的分隔符。这样,即使文件名中包含空格或特殊字符,也能被正确处理。

  2. 使用 -I 参数指定替换字符串

    如果你想要在文件名前添加一些前缀或后缀,可以使用 -I 参数:

    bash复制代码
      find . -type f -name "*.jpg" -print0 | xargs -0 -I {} mv {} backups/{}

    在这个例子中,{} 是一个占位符,对于 xargs 读取的每个文件名,它都会被相应的文件名替换。然后,mv 命令将文件移动到 backups 目录下,并保持原文件名不变。

  3. 限制每个命令的参数数量

    如果你正在执行的命令对参数数量有限制(例如,某些命令可能因为参数过多而失败),你可以使用 -n 参数来限制每个命令的参数数量:

    bash复制代码
      find . -type f -name "*.log" -print0 | xargs -0 -n 10 tar -cvzf logs.tar.gz

    这个命令会尝试将最多 10 个 .log 文件名作为参数传递给 tar 命令,以创建一个包含这些文件的归档文件。注意,由于 tar 命令通常可以处理大量文件名作为参数,这个示例主要是为了展示 -n 参数的使用。

  4. 自定义分隔符

    如果你的输入项不是以空白字符分隔的,你可以使用 -d 参数来指定分隔符:

    bash复制代码
      echo -e "file1\tfile2\tfile3" | xargs -d $'\t' -I {} echo Processing {}

    这个命令会输出:

    复制代码
      Processing file1
      Processing file2
      Processing file3

    这里,echo -e 用于生成以制表符分隔的字符串,而 xargs -d $'\t' 则指定了制表符作为输入项的分隔符。

 

 

2. find 使用xargs 批量给文件名加前缀

 

要使用 find 命令结合 xargs 来批量给文件名加前缀,你可以按照以下步骤操作。假设你想给当前目录及其子目录下所有的 .txt 文件添加前缀 prefix_,你可以使用下面的命令:

bash复制代码
  find . -type f -name "*.txt" -print0 | xargs -0 -I {} mv {} prefix_{}

但是,这里有一个潜在的问题:如果文件名中包含特殊字符(如空格、引号、换行符等),并且这些特殊字符没有被正确处理,那么 mv 命令可能会失败或产生意外的结果。虽然 -print0 和 xargs -0 的组合通常可以很好地处理文件名中的空格,但它可能不足以处理所有类型的特殊字符(尤其是换行符,这在正常文件名中很少见,但在某些情况下可能会出现)。

不过,对于大多数常见用例,上面的命令应该足够了。但如果你想要一个更健壮的解决方案,可以考虑使用 find 的 -exec 选项,它可以直接在 find 命令中处理每个文件,而无需依赖外部命令(如 xargs)来处理文件名:

bash复制代码
  find . -type f -name "*.txt" -exec sh -c 'mv "$0" "prefix_${0#./}"' {} \;

在这个 -exec 命令中,sh -c '...' {} \; 部分会对每个找到的文件执行一个小的 shell 脚本。$0 在 shell 脚本中代表传递给脚本的第一个参数(在这里是文件名)。${0#./} 是一个 shell 参数扩展,用于从文件名中删除开头的 ./(如果存在)。然后,mv "$0" "prefix_${0#./}" 将原始文件名移动(重命名)为带有前缀的新文件名。

注意:虽然 -exec 方法在处理文件名时通常更可靠,但它可能不如 xargs 那样高效,因为 -exec 会为每个找到的文件启动一个新的 shell 进程。然而,对于大多数文件操作任务来说,这种性能差异是可以接受的。

如果你确实需要使用 xargs 并且想要确保即使文件名中包含特殊字符也能正确处理,那么通常 -print0 和 xargs -0 的组合就足够了。但在极少数情况下,如果文件名中可能包含换行符,你可能需要采取额外的步骤来确保这些文件名被正确处理(尽管这在实际应用中非常罕见)。

 

3. 查找文件并拷贝 exec 和args

-exec:

find . -type f -mtime -7 -exec cp {} /destination/path \;

 

-args:

find . -type f -name "*.jpg" -print0 | xargs -0 -I {} cp {} /path/to/destination/
这个命令的组成部分解释如下:

find . -type f -name "*.jpg": 在当前目录(.)及其子目录下查找所有类型为文件(-type f)且文件名以 .jpg 结尾的文件。
-print0: 让 find 命令以 null 字符(而不是换行符)作为输出项的分隔符,这对于处理包含空格、引号或换行符等特殊字符的文件名非常重要。
|: 管道符号,用于将 find 命令的输出作为 xargs 命令的输入。
xargs -0 -I {}: xargs 命令读取来自标准输入的数据,-0 选项告诉 xargs 输入项是以 null 字符分隔的,-I {} 选项定义了一个替换字符串(这里是 {}),它将在执行命令时被输入项的值替换。
cp {} /path/to/destination/: 这是要执行的命令模板,其中 {} 会被 xargs 读取的每个文件名替换。这个命令的作用是将文件拷贝到指定的目录中。
请注意,如果你正在处理的文件数量非常多,以至于一次性传递给 cp 命令的参数过多,那么在某些系统上可能会遇到参数列表过长的错误(argument list too long)。虽然 xargs 默认会尝试智能地分批处理输入项,但如果你遇到了这个问题,你可以通过 xargs 的 -n 选项来限制每次传递给命令的参数数量。然而,对于 cp 命令来说,这通常不是必需的,因为它可以很好地处理大量的文件参数。

另外,如果你想要保留原始文件结构(即子目录)在目标目录中,那么你可能需要使用更复杂的脚本来实现这一点,因为 cp 命令本身并不支持递归地复制目录结构并保持文件相对路径不变。对于这种情况,你可能需要考虑使用 rsync 或编写一个自定义的脚本来遍历文件并相应地创建目标目录结构。

 

 

标签:xargs,文件名,exec,命令,参数,find
From: https://www.cnblogs.com/david-cloud/p/18329744

相关文章

  • 如何在 sypder 中使用 mpiexec -n 6 file.py
    我正在研究Openseespy,我想在Spyder控制台中进行并行处理我尝试过这种方法“从IPython导入get_ipythonip=get_ipython()ip.run_cell("!mpiexec-n6file.py")"但收到错误:file.py不是有效的Win32应用程序。在Spyder中使用mpiexec进行并行处......
  • 解决yolo使用engine模型推理报错AttributeError: “NoneType’cbject has no attribut
    目录起因分析两种解决方案方法一:卸载生产服务器的tensorrt,下载与训练服务器相同版本方法二:将训练服务器训练的pt模型下载出来到生产服务器导出起因在做yolo模型训练时使用了训练服务器,训练结束把模型转换成了.engine模型,在训练服务器上可以正常使用,但把模型放到生成服......
  • BUUCTF-Exec(Web)
    1.相关知识Ping命令ping命令通常用来作为网络可用性的检查。ping命令可以对一个网络地址发送测试数据包,看该网络地址是否有响应并统计响应时间,以此来测试网络的连通情况和测试网络速度。ping命令执行后会显示一系列Replyfrom或者Requesttimeout这样的结果。前者表示与对方......
  • ScheduledThreadPoolExecutor
    定时任务ScheduledThreadPoolExecutor类有两个用途:指定时间延迟后执行任务;周期性重复执行任务。JDK1.5之前,主要使用Timer类来完成定时任务,但是Timer有以下缺陷:Timer是单线程模式;如果在执行任务期间某个TimerTask耗时较久,就会影响其它任务的调度;Timer的任务调度是基于......
  • Leetcode 1334 Find the City With the Smallest Number of Neighbors at a Threshold
    Problem:FindtheCityWiththeSmallestNumberofNeighborsataThresholdDistanceTheknowledgepointsoutsideofmyskilltreeExplanationofCodeandConceptsWhatisfloat('inf')?float('inf')inPythonrepresentspositiveinfin......
  • 无法编译 Arduino ESP32 代码:.../python3: exec 格式错误
    昨天我使用MacOSArduinoIDE或VSCode编译Arduino草图没有任何问题。但今天什么也编译不了。我尝试在ArduinoIDE或带有Arduino扩展的VSCode中编译的任何草图都会出现此错误:fork/exec/Library/Frameworks/Python.framework/Versions/3.11/bin/python3:exec......
  • ubuntu安装findutils报错xargs: not found
    因为缺少find所以安装findutilsapt-getinstallfindutils报错说缺少xargs和find,但这俩也是属于findutils的,造成了循环依赖root@ubuntu:/home/mika#apt-getinstallfindutilsReadingpackagelists...DoneBuildingdependencytreeReadingstateinformation...DoneTh......
  • PYTHON 代码执行错误 - 冻结 importlib._bootstrap>(1165)_find_and_load()?
    在MACOS10.15(CATALINA)上执行此PYTHON代码时出现以下错误。我正在使用IDLEShell编写PYTHON3.11。Python3.11.4(v3.11.4:d2340ef257,Jun 62023,19:15:51)[Clang13.0.0(clang-1300.0.29.30)]ondarwinType"help","copyright","credits"o......
  • ProcessPoolExecutor 的递归使用挂起
    问题我尝试将aProcessPoolExecutor与递归调用一起使用,但它不起作用。我在下面创建了一个最小的示例fromconcurrent.futuresimportProcessPoolExecutorfromtimeimportsleepexecutor=ProcessPoolExecutor()i=3deftest():globaliprint(......
  • Python 中 eval 与 exec 的相同点和不同点
    相同点在Python中,eval和exec都可以用来执行动态生成(dynamicallygenerated)的代码。两者在Python3中的函数声明基本相同,如下所示:eval(expression[,globals[,locals]])exec(object[,globals[,locals]])其中,输入参数中,globals必须是字典(dict)类型,表示全局空间的变量,......