Java学习者论坛

 找回密码
 立即注册

QQ登录

只需一步,快速开始

手机号码,快捷登录

恭喜Java学习者论坛(https://www.javaxxz.com)已经为数万Java学习者服务超过8年了!积累会员资料超过10000G+
成为本站VIP会员,下载本站10000G+会员资源,购买链接:点击进入购买VIP会员
JAVA高级面试进阶视频教程Java架构师系统进阶VIP课程

分布式高可用全栈开发微服务教程

Go语言视频零基础入门到精通

Java架构师3期(课件+源码)

Java开发全终端实战租房项目视频教程

SpringBoot2.X入门到高级使用教程

大数据培训第六期全套视频教程

深度学习(CNN RNN GAN)算法原理

Java亿级流量电商系统视频教程

互联网架构师视频教程

年薪50万Spark2.0从入门到精通

年薪50万!人工智能学习路线教程

年薪50万!大数据从入门到精通学习路线年薪50万!机器学习入门到精通视频教程
仿小米商城类app和小程序视频教程深度学习数据分析基础到实战最新黑马javaEE2.1就业课程从 0到JVM实战高手教程 MySQL入门到精通教程
查看: 248|回复: 0

[默认分类] find命令和xargs命令

[复制链接]
  • TA的每日心情
    开心
    2021-12-13 21:45
  • 签到天数: 15 天

    [LV.4]偶尔看看III

    发表于 2018-6-1 11:01:11 | 显示全部楼层 |阅读模式


      能很好的用好find将是Linux工作的一大幸事,不要奢望一口气记住本文所有的方法,要慢慢的去尝试和领会这些用法的精妙和合理之处,到了一定时候自然会记住很多,能够举一反三将是最大的收获!


    1.find

    由于find具有强大的功能,所以它的选项也很多,其中大部分选项都值得我们花时间来了解一下。即使系统中含有网络文件系统( N F S ),find命令在该文件系统中同样有效,只你具有相应的权限。

    在运行一个非常消耗资源的find命令时,很多人都倾向于把它放在后台执行,因为遍历一个大的文件系统可能会花费很长的时间(这里是指3 0 G字节以上的文件系统)。

    find命令的一般形式为:


    find pathname -options [-print -exec -ok ...]

    让我们来看看该命令的参数:


    pathname: find命令所查找的目录路径。例如用.来表示当前目录,用/来表示系统根目录。
    -print: find命令将匹配的文件输出到标准输出。
    -exec: find命令对匹配的文件执行该参数所给出的s h e l l命令。相应命令的形式为" command" { } ;,注意{ }和;之间的空格。
    -ok: 和- e x e c的作用相同,只不过以一种更为安全的模式来执行该参数所给出的s h e l l命令,在执行每一个命令之前,都会给出提示,让用户来确定是否执行。


    find命令选项

    -name:按照文件名查找文件。


    -perm:按照文件权限来查找文件


    -prune:使用这一选项可以使find命令不在当前指定的目录中查找,如果同时使用-depth选项,那么-prune将被find命令忽略

    -user: 按照文件属主来查找文件。

    -group:按照文件所属的组来查找文件。


    -mtime -n +n:按照文件的更改时间来查找文件, - n表示文件更改时间距现在n天以内,+ n表示文件更改时间距现在n天以前。find命令还有- a t i m e和- c t i m e选项,但它们都和- m t i m e选项。

    -nogroup:查找无有效所属组的文件,即该文件所属的组在/ e t c / g r o u p s中不存在。

    -nouser:查找无有效属主的文件,即该文件的属主在/ e t c / p a s s w d中不存在。

    -newer file1 ! file2:查找更改时间比文件f i l e 1新但比文件f i l e 2旧的文件。


    -type 查找某一类型的文件,诸如:
    b - 块设备文件。
    d - 目录。
    c - 字符设备文件。
    p - 管道文件。
    l - 符号链接文件。
    f - 普通文件。
    -size n:[c] 查找文件长度为n块的文件,带有c时表示文件长度以字节计。
    -depth:在查找文件时,首先查找当前目录中的文件,然后再在其子目录中查找


    -fstype:查找位于某一类型文件系统中的文件,这些文件系统类型通常可以在配置文件/ e t c / f s t a b中找到,该配置文件中包含了本系统中有关文件系统的信息。

    -mount:在查找文件时不跨越文件系统m o u n t点。

    -follow:如果find命令遇到符号链接文件,就跟踪至链接所指向的文件。


    -cpio:对匹配的文件使用c p i o命令,将这些文件备份到磁带设备中

    另外,下面三个的区别:


    -amin n
      查找系统中最后N分钟访问的文件
      -atime n
      查找系统中最后n*24小时访问的文件
      -cmin n
      查找系统中最后N分钟被改变文件状态的文件
      -ctime n
      查找系统中最后n*24小时被改变文件状态的文件
     -mmin n
      查找系统中最后N分钟被改变文件数据的文件
      -mtime n
      查找系统中最后n*24小时被改变文件数据的文件


    使用exec或ok来执行shell命令

    使用find时,只要把想要的操作写在一个文件里,就可以用exec来配合find查找,很方便的

    (在有些操作系统中只允许- e x e c选项执行诸如l s或ls -l这样的命令)。大多数用户使用这一选项是为了查找旧文件并删除它们。建议在真正执行r m命令删除文件之前,最好先用l s命令看一下,确认它们是所要删除的文件。

    e x e c选项后面跟随着所要执行的命令或脚本,然后是一对儿{ },一个空格和一个,最后是一个分号。

    为了使用e x e c选项,必须要同时使用p r i n t选项。如果验证一下find命令,会发现该命令只输出从当前路径起的相对路径及文件名。

    例如:为了用ls -l命令列出所匹配到的文件,可以把ls -l命令放在find命令的- e x e c选项中

    # find . -type f -exec ls -l { } ;

    -rw-r--r-- 1 root root 34928 2003-02-25 ./conf/httpd.conf

    -rw-r--r-- 1 root root 12959 2003-02-25 ./conf/magic

    -rw-r--r-- 1 root root 180 2003-02-25 ./conf.d/README

    上面的例子中,find命令匹配到了当前目录下的所有普通文件,并在- e x e c选项中使用ls -l命令将它们列出。

    在/ l o g s目录中查找更改时间在5日以前的文件并删除它们:

    $ find logs -type f -mtime +5 -exec rm { } ;

    记住,在s h e l l中用任何方式删除文件之前,应当先查看相应的文件,一定要小心!当使用诸如m v或r m命令时,可以使用- e x e c选项的安全模式。它将在对每个匹配到的文件进行操作之前提示你。

    在下面的例子中, find命令在当前目录中查找所有文件名以. L O G结尾、更改时间在5日以上的文件,并删除它们,只不过在删除之前先给出提示。

    $ find . -name "*.conf" -mtime +5 -ok rm { } ;

    ? n

    按y键删除文件,按n键不删除。

    任何形式的命令都可以在- e x e c选项中使用。

    在下面的例子中我们使用g r e p命令。find命令首先匹配所有文件名为“ passwd*”的文件,例如passwd、passwd.old、passwd.bak,然后执行grep命令看看在这些文件中是否存在一个sam用户。

    # find /etc -name "passwd*" -exec grep "sam" { } ;

    sam:x:501:501::/usr/sam:/bin/bash

    find命令的例子

    查找当前用户主目录下的所有文件,下面两种方法都可以使用:

    $ find $HOME -print

    $ find ~ -print

    为了在当前目录中文件属主具有读、写权限,并且文件所属组的用户和其他用户具有读权限的文件,可以用:

    $ find . -type f -perm 644 -exec ls -l { } ;

    为了查找系统中所有文件长度为0的普通文件,并列出它们的完整路径,可以用:

    $ find / -type f -size 0 -exec ls -l { } ;

    查找/var/logs目录中更改时间在7日以前的普通文件,并在删除之前询问它们:

    $ find /var/logs -type f -mtime +7 -ok rm { } ;

    为了查找系统中所有属于root组的文件,可以用:

    $find . -group root -exec ls -l { } ;

    -rw-r--r-- 1 root root 595 10月 31 01:09 ./fie1

    下面的find命令将删除当目录中访问时间在7日以来、含有数字后缀的admin.log文件。该命令只检查三位数字,所以相应文件的后缀不要超过999。

    先建几个admin.log*的文件 ,才能使用下面这个命令

    $ find . -name "admin.log[0-9][0-9][0-9]" -atime -7 -ok

    rm { } ;

    ? n

    ? n

    ? n

    ? n

    为了查找当前文件系统中的所有目录并排序,可以用:

    $ find . -type d &line;sort

    为了查找系统中所有的r m t磁带设备,可以用:

    $ find /dev/rmt -print


    2.xargs



    使用find命令的- e x e c选项处理匹配到的文件时, f i nd命令将所有匹配到的文件一起传递给e x e

    c执行。但有些系统对能够传递给e x e c的命令长度有限制,这样在f i

    nd命令运行几分钟之后,就会出现溢出错误。错误信息通常是“参数列太长”或“参数列溢出”。这就是x a rg s命令的用处所在,特别是与f i

    nd命令一起使用。

    find命令把匹配到的文件传递给x a rg s命令,而x a rg s命令每次只获取一部分文件而不是全部,不像- e x e c选项那样。这样它可以先处理最先获取的一部分文件,然后是下一批,并如此继续下去。

    在有些系统中,使用- e x e c选项会为处理每一个匹配到的文件而发起一个相应的进程,并非将匹配到的文件全部作为参数一次执行;这样在有些情况下就会出现进程过多,系统性能下降的问题,因而效率不高;

    而使用x a rg s命令则只有一个进程。另外,在使用x a rg s命令时,究竟是一次获取所有的参数,还是分批取得参数,以及每一次获取参数的数目都会根据该命令的选项及系统内核中相应的可调参数来确定。

    来看看x a rg s命令是如何同find命令一起使用的,并给出一些例子。

    下面的例子查找系统中的每一个普通文件,然后使用x a rg s命令来测试它们分别属于哪类文件

    #find . -type f -print &line; xargs file

    ./.kde/Autostart/Autorun.desktop: UTF-8 Unicode English text

    ./.kde/Autostart/.directory: ISO-8859 text

    ......

    在整个系统中查找内存信息转储文件(core dump) ,然后把结果保存到/tmp/core.log 文件中:

    $ find / -name "core" -print &line; xargs echo "" >/tmp/core.log

    上面这个执行太慢,我改成在当前目录下查找

    #find . -name "file*" -print &line; xargs echo "" > /temp/core.log

    # cat /temp/core.log

    ./file6

    在当前目录下查找所有用户具有读、写和执行权限的文件,并收回相应的写权限:

    # ls -l

    drwxrwxrwx 2 sam adm 4096 10月 30 20:14 file6

    -rwxrwxrwx 2 sam adm 0 10月 31 01:01 http3.conf

    -rwxrwxrwx 2 sam adm 0 10月 31 01:01 httpd.conf

    # find . -perm -7 -print &line; xargs chmod o-w

    # ls -l

    drwxrwxr-x 2 sam adm 4096 10月 30 20:14 file6

    -rwxrwxr-x 2 sam adm 0 10月 31 01:01 http3.conf

    -rwxrwxr-x 2 sam adm 0 10月 31 01:01 httpd.conf

    用g r e p命令在所有的普通文件中搜索hostname这个词:

    # find . -type f -print &line; xargs grep "hostname"

    ./httpd1.conf:# different IP addresses or hostnames and have them handled by the

    ./httpd1.conf:# VirtualHost: If you want to maintain multiple domains/hostnames

    on your

    用g r e p命令在当前目录下的所有普通文件中搜索hostnames这个词:

    # find . -name * -type f -print &line; xargs grep "hostnames"

    ./httpd1.conf:# different IP addresses or hostnames and have them handled by the

    ./httpd1.conf:# VirtualHost: If you want to maintain multiple domains/hostnames

    on your

    注意,在上面的例子中, 用来取消find命令中的*在s h e l l中的特殊含义。


    3.find命令配合使用e x e c和x a rg s可以使用户对所匹配到的文件执行几乎所有的命令。

    下面是find一些常用参数的例子,有用到的时候查查就行了,像上面前几个贴子,都用到了其中的的一些参数,也可以用man或查看论坛里其它贴子有find的命令手册


    a.使用name选项

    文件名选项是find命令最常用的选项,要么单独使用该选项,要么和其他选项一起使用。

    可以使用某种文件名模式来匹配文件,记住要用引号将文件名模式引起来。

    不管当前路径是什么,如果想要在自己的根目录$ H O M E中查找文件名符合* . t x t的文件,使用~作为" p a t h n a m e参数,波浪号~代表了你的$ H O M E目录。

    $ find ~ -name "*.txt" -print

    想要在当前目录及子目录中查找所有的‘ * . t x t’文件,可以用:

    $ find . -name "*.txt" -print

    想要的当前目录及子目录中查找文件名以一个大写字母开头的文件,可以用:

    $ find . -name "[A-Z]*" -print

    想要在/ e t c目录中查找文件名以h o s t开头的文件,可以用:

    $ find /etc -name "host*" -print

    想要查找$ H O M E目录中的文件,可以用:

    $ find ~ -name "*" -print 或find . -print

    要想让系统高负荷运行,就从根目录开始查找所有的文件。

    $ find / -name "*" -print

    如果想在当前目录查找文件名以两个小写字母开头,跟着是两个数字,最后是. t x t的文件,下面的命令就能够返回名为a x 3 7 . t x t的文件:

    $find . -name "[a-z][a-z][0--9][0--9].txt" -print


    b.用perm选项

    按照文件权限模式用- p e r m选项。

    按文件权限模式来查找文件的话。最好使用八进制的权限表示法。

    如在当前目录下查找文件权限位为7 5 5的文件,即文件属主可以读、写、执行,其他用户可以读、执行的文件,可以用:

    $ find . -perm 755 -print

    还有一种表达方法:在八进制数字前面要加一个横杠-,表示都匹配,如-007就相当于777,-006相当于666

    # ls -l

    -rwxrwxr-x 2 sam adm 0 10月 31 01:01 http3.conf

    -rw-rw-rw- 1 sam adm 34890 10月 31 00:57 httpd1.conf

    -rwxrwxr-x 2 sam adm 0 10月 31 01:01 httpd.conf

    drw-rw-rw- 2 gem group 4096 10月 26 19:48 sam

    -rw-rw-rw- 1 root root 2792 10月 31 20:19 temp

    # find . -perm 006

    # find . -perm -006

    ./sam

    ./httpd1.conf

    ./temp

    -perm mode:文件许可正好符合mode

    -perm +mode:文件许可部分符合mode

    -perm -mode: 文件许可完全符合mode


    c.忽略某个目录



    果在查找文件时希望忽略某个目录,因为你知道那个目录中没有你所要查找的文件,那么可以使用- p r u ne选项来指出需要忽略的目录。在使用-

    p r u n e选项时要当心,因为如果你同时使用了- d e p t h选项,那么- p r u ne选项就会被find命令忽略。

    如果希望在/ a p p s目录下查找文件,但不希望在/ a p p s / b i n目录下查找,可以用:

    $ find /apps -path "/apps/bin" -prune -o -print

    补充:

    使用find查找文件的时候怎么避开某个文件目录

    比如要在/usr/sam目录下查找不在dir1子目录之内的所有文件

    find /usr/sam -path "/usr/sam/dir1" -prune -o -print

    find [-path ..] [expression] 在路径列表的后面的是表达式

    -path "/usr/sam" -prune -o -print 是 -path "/usr/sam" -a -prune -o

    -print 的简写表达式按顺序求值, -a 和 -o 都是短路求值,与 shell 的 && 和 &line;&line; 类似如果 -path

    "/usr/sam" 为真,则求值 -prune , -prune 返回真,与逻辑表达式为真;否则不求值 -prune

    ,与逻辑表达式为假。如果 -path "/usr/sam" -a -prune 为假,则求值 -print ,-print

    返回真,或逻辑表达式为真;否则不求值 -print,或逻辑表达式为真。

    这个表达式组合特例可以用伪码写为

    if -path "/usr/sam" then

    -prune

    else

    -print

    避开多个文件夹

    代码

    find /usr/sam ( -path /usr/sam/dir1 -o -path /usr/sam/file1 ) -prune -o -print

    圆括号表示表达式的结合。

    表示引用,即指示 shell 不对后面的字符作特殊解释,而留给 find 命令去解释其意义。

    查找某一确定文件,-name等选项加在-o 之后

    代码

    #find /usr/sam (-path /usr/sam/dir1 -o -path /usr/sam/file1 ) -prune -o -name "temp" -print


    4.使用user和nouser选项

    按文件属主查找文件,如在$ H O M E目录中查找文件属主为sam的文件,可以用:

    $ find ~ -user sam -print

    在/ e t c目录下查找文件属主为u u c p的文件:

    代码

    $ find /etc -user uucp -print

    为了查找属主帐户已经被删除的文件,可以使用- n o u s e r选项。这样就能够找到那些属主在/ e t c / p a s s w

    d文件中没有有效帐户的文件。在使用- n o u s e r选项时,不必给出用户名; find命令能够为你完成相应的工作。

    例如,希望在/ h o m e目录下查找所有的这类文件,可以用:

    $ find /home -nouser -print


    5、使用group和nogroup选项

    就像u s e r和n o u s e r选项一样,针对文件所属于的用户组, find命令也具有同样的选项,为了在/ a p p s目录下查找属于gem用户组的文件,可以用:

    $ find /apps -group gem -print

    要查找没有有效所属用户组的所有文件,可以使用n o g r o u p选项。下面的find命令从文件系统的根目录处查找这样的文件

    $ find / -nogroup-print


    6、按照更改时间或访问时间等查找文件

    如果希望按照更改时间来查找文件,可以使用m t i m e,atime或ctime选项。如果系统突然没有可用空间了,很有可能某一个文件的长度在此期间增长迅速,这时就可以用m t i m e选项来查找这样的文件。

    用减号-来限定更改时间在距今n日以内的文件,而用加号+来限定更改时间在距今n日以前的文件。

    希望在系统根目录下查找更改时间在5日以内的文件,可以用:

    代码

    $ find / -mtime -5 -print

    为了在/ v a r / a d m目录下查找更改时间在3日以前的文件,可以用:

    $ find /var/adm -mtime +3 -print


    7、查找比某个文件新或旧的文件

    如果希望查找更改时间比某个文件新但比另一个文件旧的所有文件,可以使用- n e w e r选项。它的一般形式为:

    代码

    newest_file_name ! oldest_file_name

    其中,!是逻辑非符号。

    查找更改时间比文件sam新但比文件temp旧的文件:

    例:有两个文件

    -rw-r--r-- 1 sam adm 0 10月 31 01:07 fiel

    -rw-rw-rw- 1 sam adm 34890 10月 31 00:57 httpd1.conf

    -rwxrwxr-x 2 sam adm 0 10月 31 01:01 httpd.conf

    drw-rw-rw- 2 gem group 4096 10月 26 19:48 sam

    -rw-rw-rw- 1 root root 2792 10月 31 20:19 temp

    # find -newer httpd1.conf ! -newer temp -ls

    1077669 0 -rwxrwxr-x 2 sam adm 0 10月 31 01:01 ./httpd.conf

    1077671 4 -rw-rw-rw- 1 root root 2792 10月 31 20:19 ./temp

    1077673 0 -rw-r--r-- 1 sam adm 0 10月 31 01:07 ./fiel

    查找更改时间在比temp文件新的文件:

    $ find . -newer temp -print


    8、使用type选项

    在/ e t c目录下查找所有的目录,可以用:

    $ find /etc -type d -print

    在当前目录下查找除目录以外的所有类型的文件,可以用:

    $ find . ! -type d -print

    在/ e t c目录下查找所有的符号链接文件,可以用

    代码

    $ find /etc -type l -print


    9、使用size选项

    可以按照文件长度来查找文件,这里所指的文件长度既可以用块( b l o c k)来计量,也可以用字节来计量。以字节计量文件长度的表达形式为N c;以块计量文件长度只用数字表示即可。

    在按照文件长度查找文件时,一般使用这种以字节表示的文件长度,在查看文件系统的大小,因为这时使用块来计量更容易转换。

    在当前目录下查找文件长度大于1 M字节的文件:

    $ find . -size +1000000c -print

    在/home/apache目录下查找文件长度恰好为1 0 0字节的文件:

    $ find /home/apache -size 100c -print

    在当前目录下查找长度超过1 0块的文件(一块等于5 1 2字节):

    代码

    $ find . -size +10 -print


    10、使用depth选项

    在使用find命令时,可能希望先匹配所有的文件,再在子目录中查找。使用d e p t h选项就可以使find命令这样做。这样做的一个原因就是,当在使用find命令向磁带上备份文件系统时,希望首先备份所有的文件,其次再备份子目录中的文件。

    在下面的例子中, find命令从文件系统的根目录开始,查找一个名为C O N . F I L E的文件。

    它将首先匹配所有的文件然后再进入子目录中查找。

    $ find / -name "CON.FILE" -depth -print


    11、使用mount选项

    在当前的文件系统中查找文件(不进入其他文件系统),可以使用find命令的m o u n t选项。

    从当前目录开始查找位于本文件系统中文件名以X C结尾的文件:


    $ find . -name "*.XC" -mount -print




      
    Linux xargs命令
      
    xargs是给命令传递参数的一个过滤器,也是组合多个命令的一个工具。它把一个数据流分割为一些足够小的块,以方便过滤器和命令进行处理。通常情况下,xargs从管道或者stdin中读取数据,但是它也能够从文件的输出中读取数据。xargs的默认命令是echo,这意味着通过管道传递给xargs的输入将会包含换行和空白,不过通过xargs的处理,换行和空白将被空格取代。
    xargs 是一个强有力的命令,它能够捕获一个命令的输出,然后传递给另外一个命令,下面是一些如何有效使用xargs 的实用例子。

    1. 当你尝试用rm 删除太多的文件,你可能得到一个错误信息:/bin/rm Argument list too long. 用xargs 去避免这个问题
    find ~ -name ‘*.log’ -print0 | xargs -0 rm -f


    2. 获得/etc/ 下所有*.conf 结尾的文件列表,有几种不同的方法能得到相同的结果,下面的例子仅仅是示范怎么实用xargs ,在这个例子中实用 xargs将find 命令的输出传递给ls -l
    # find /etc -name "*.conf" | xargs ls –l

    3. 假如你有一个文件包含了很多你希望下载的URL, 你能够使用xargs 下载所有链接
    # cat url-list.txt | xargs wget –c



    4. 查找所有的jpg 文件,并且压缩它
    # find / -name *.jpg -type f -print | xargs tar -cvzf images.tar.gz


    5. 拷贝所有的图片文件到一个外部的硬盘驱动  
    # ls *.jpg | xargs -n1 -i cp {} /external-hard-drive/directory


    回复

    使用道具 举报

    您需要登录后才可以回帖 登录 | 立即注册

    本版积分规则

    QQ|手机版|Java学习者论坛 ( 声明:本站资料整理自互联网,用于Java学习者交流学习使用,对资料版权不负任何法律责任,若有侵权请及时联系客服屏蔽删除 )

    GMT+8, 2024-4-24 21:11 , Processed in 0.413937 second(s), 37 queries .

    Powered by Discuz! X3.4

    © 2001-2017 Comsenz Inc.

    快速回复 返回顶部 返回列表