Linux云计算集群架构师->第十一章 重定向和文件的查找
# 第十一章 重定向和文件的查找 (上课时间2021-07-01，笔记整理时间2021-07-04) 本节所讲内容： **11.1 文件描述符 0、1、2** **11.2 重定向的含义-管道的使用-tee 命令** **11.3 which-whereis-locate-grep-find 查找命令** **11.4 命令判断** LINUX 下一切皆文件 文件又可分为：普通文件、目录文件、链接文件、设备文件 LINUX 系统使用文件来描述各种硬件设备资源，如：/dev/sda /dev/sdb /dev/sr0 ## 11.1 文件描述符 用户通过操作系统处理信息的过程中,使用的交互设备文件（键盘，鼠标，显示器） | Number | Channel name | Description | Default connection | Usage | | ------ | ------------ | -------------- | ------------------ | ----------------- | | 0 | stdin | Standard input | keyboard | read only | | 1 | stdout | Standard input | Terminal | Write only | | 2 | stderr | Standard error | Terminal | Write only | | 3+ | filename | Other files | none | read and/or Write | ### 11.1.1 输入输出标准说明 STDIN 标准输入 默认的设备是键盘 文件编号为：0 STDOUT 标准输出 默认的设备是显示器 文件编号为：1 ，也可以重定向到文件 STDERR 标准错误 默认的设备是显示器 文件编号为：2 ，也可以重定向到文件  查看一个进程打开了哪些文件？ 语法： ll /proc/进程 ID/fd ```sh [root@Centos83 ~]# ps -aux | grep vim root 18728 0.1 0.8 49588 8484 pts/1 S+ 19:37 0:00 vim /etc/shadow root 18738 0.0 0.1 12344 1072 pts/0 S+ 19:37 0:00 grep --color=auto vim [root@Centos83 ~]# ll /proc/18728/fd #查看打开的文件 总用量 0 lrwx------ 1 root root 64 7月 3 19:37 0 -> /dev/pts/1 #0 文件描述符 lrwx------ 1 root root 64 7月 3 19:37 1 -> /dev/pts/1 #1 文件描述符 lrwx------ 1 root root 64 7月 3 19:37 2 -> /dev/pts/1 #2 文件描述符 lr-x------ 1 root root 64 7月 3 19:37 3 -> /var/lib/sss/mc/passwd lrwx------ 1 root root 64 7月 3 19:37 4 -> 'socket:[197579]' ``` 注： 这些 0,1,2,4 就是文件的描述符。一个进程启动时,都会打开 3 个文件:标准输入、标准输出和标准出错处理。 这 3 个文件分别对应文件描述符为 0、1 和 2 也就是宏替换 STDIN_FILENO、STDOUT_FILENO 和 STDERR_FILENO。 /proc/进程 ID/fd #这个 fd 目录下，专门存文件描述符 注：对文件描述符的操作就是对文件本身的操作。 我可以直接通过操作文件描述来修改文件。 例 2：查看和临时设置一个进程最多可以打开几个文件，即：一个进程可以打开的文件描述符限制 ```sh [root@Centos83 ~]# ulimit -n # 查看一个进程最多可以同时打开的文件数 1024 [root@Centos83 ~]# ulimit -n 2048 # 修改一个进程最多可以同时打开的文件数为 2048 [root@Centos83 ~]# ulimit -n 2048 ``` ## 11.2 重定向的含义-管道的使用-tee 命令 ### 11.2.1 输出重定向 定义：将命令的正常输出结果保存到指定的文件中,而不是直接显示在显示器的屏幕上重定向输出使用”>” “>>” 操作符号 语法： ＞ 文件名 #表示将标准输出的内容，写到后面的文件中，如果此文件名已经存在，将会覆盖原文件中的内容 ＞＞ 文件名 #表示将标准输出的内容，追加到后面的文件中。若重定向的输出的文件不存在，则会新建该文件 查看当前主机的 CPU 的类型保存到 cpu.txt 文件中(而不是直接显示到屏幕上) ```sh [root@Centos83 ~]# cat /proc/cpuinfo > cpu.txt #将内核的版本信息追加到 cpu.txt [root@Centos83 ~]# uname -a >> cpu.txt #将计算机名和操作系统的信息追加到cpu.txt [root@Centos83 ~]# cat cpu.txt [root@Centos83 ~]# uname -a > cpu.txt #清空cpu.txt 将uname 信息写入到cpu.txt ``` ### 11.2.2 输入重定向 将命令中接收输入的途径由默认的键盘改为其他文件.而不是等待从键盘输入 ```sh [root@Centos83 ~]# grep root /etc/passwd root:x:0:0:root:/root:/bin/bash operator:x:11:0:operator:/root:/sbin/nologin [root@Centos83 ~]# grep root < /etc/passwd root:x:0:0:root:/root:/bin/bash operator:x:11:0:operator:/root:/sbin/nologin ``` ### 11.2.3 EOF EOF 本意是 End Of File，表明到了文件末尾。”EOF“通常与”<<“结合使用，“< eof.txt < abc > def > ghi > 123 > 345 > 789 > 1011 > EOF #只输入红色文字部分，>为 EOF 的交互输入提示符。 [root@Centos83 ~]# cat eof.txt ``` **以 abc 作为分界符** ```sh [root@Centos83 ~]# cat abc.txt < eof > EOF > abc ``` 在脚本中我们可以通过重定向输入来打印消息菜单 在使用的时候需要在”<< “右边跟一对终止符。终止符是可以自定义 ```sh [root@Centos83 ~]# vim eof.sh #!/bin/bash cat < 2 指的是标准错误输出的文件描述符 在实际应用中，错误重定向可以用来收集执行的错误信息.为排错提供依据；对于 shell 脚本还可以将无关紧要的错误信息重定向到空文件/dev/null 中，以保持脚本输出的简洁 例 1: 将错误显示的内容和正确显示的内容分开 ```sh [root@Centos83 ~]# ls /etc/passwc 2> err.txt #将错误的结果输入到err.txt [root@Centos83 ~]# cat err.txt ``` 注：使用 2> 操作符时,会像使用 > 一样覆盖目标文件的内容，若追加而不覆盖文件的内容即可使用 2>> 操作符 ### 11.2.5 null 黑洞和 zero 空文件 1、把/dev/null 看作"黑洞"，所有写入它的内容都会永远丢失. 而尝试从它那儿读取内容则什么也读不到. 然而 /dev/null 对命令行和脚本都非常的有用. ```sh [root@Centos83 ~]# echo test > /dev/null [root@Centos83 ~]# cat /dev/null #什么信息也看不到 ``` 2、/dev/zero 在类 UNIX 操作系统中, /dev/zero 是一个特殊的文件，当你读它的时候，它会提供无限的空字符(NULL, ASCII NUL, 0x00)。典型用法是用它来产生一个特定大小的空白文件。 使用 dd 命令产生一个 50M 的文件 参数： if 代表输入文件。如果不指定 if，默认就会从 stdin 中读取输入。 of 代表输出文件。如果不指定 of，默认就会将 stdout 作为默认输出。 bs 代表字节为单位的块大小。 count 代表被复制的块数。 ```sh [root@Centos83 ~]# dd if=/dev/zero of=zero.txt bs=2M count=100 记录了100+0 的读入记录了100+0 的写出209715200 bytes (210 MB, 200 MiB) copied, 0.29557 s, 710 MB/s [root@Centos83 ~]# du -sh zero.txt 200M zero.txt [root@Centos83 ~]# cat zero.txt #什么也不显示 ``` 正确的内容写入一个文件，错误的写入一个文件 ```sh [root@Centos83 ~]# ls /tmp abcd >ok.txt 2>err.txt ``` ### 11.2.6 >&符号 &表示等同于的意思 例 1：把正确和错误的消息输入到相同的位置 1>&2 把标准输出重定向到标准错误 2>&1 把标准错误重定向到标准输出，如图:  例 2：把正确和错误的消息输入到相同的位置  ```sh [root@Centos83 ~]# ls /tmp abcd >1.txt 2>&1 [root@Centos83 ~]# ls /tmp abcd 2>1.txt 2>&1 [root@Centos83 ~]# cat /etc/passwd abc > /dev/null 2>&1 #将标准输出和错误输出全部重定向到/dev/null 中,也就是将产生的所有信息丢弃. ``` ### 11.2.7 管道 | 的使用 语法：command-a | command-b | command-c | ......  上图可以简单理解为：管道符左边命令的结果作为管道符右边命令的标准输入 注意： 1、管道命令只处理前一个命令正确输出，不处理错误输出 2、管道右边的命令，必须能够接收标准输入的数据流命令才行 3、管道符可以把两条命令连起来，它可以链接多个命令使用 ### 11.2.8 tee 命令 **功能：读取标准输入的数据，并将其内容输出成文件。** **语法：tee [-a][--help][--version][文件...]** **参数：** **-a, --append 内容追加到给定的文件而非覆盖** **--help 在线帮助** **tee 指令会从标准输入设备读取数据，将其内容输出到标准输出设备，同时保存成文件** ```sh [root@Centos83 ~]# df -h | tee disk.log # 将磁盘使用的信息写入文件 [root@Centos83 ~]# df -h | tee -a disk.log # 将文件系统使用的信息追加到文件 ``` ## 11.3 文件查找常用命令 ### 11.3.2 which-whereis-locate-grep find 命令使用 **查找文件一般有以下几个命令：** **which 查看可执行文件的位置** **whereis 查看可执行文件的位置及相关文件** **locate 配合数据库缓存，快速查看文件位置** **grep 过滤匹配，它是一个文件搜索工具** **find 查找相关文件** ```sh [root@Centos83 ~]# which cd/usr/bin/cd [root@Centos83 ~]# whereis cd cd: /usr/bin/cd /usr/share/man/man1/cd.1.gz /usr/share/man/man1p/cd.1p.gz [root@Centos83 ~]# whereis ls ls: /usr/bin/ls /usr/share/man/man1/ls.1.gz /usr/share/man/man1p/ls.1p.gz ``` locate 命令和 find -name 功能差不多，是它的另外一种写法，但是这个要比 find 搜索快的多，因为 find 命令查找的是具体目录文件，而 locate 它搜索的是一个数据库 /var/lib/mlocate/mlocate.db，这个数据库中存有本地所有的文件信息；这个数据库是 Linux 自动创建并每天自动更新维护。相关的配置信息在/etc/updatedb.conf，查看定时任务信息在/etc/cron.daily/mlocate ```sh [root@Centos83 ~]# yum -y install mlocate [root@Centos83 ~]# touch /opt/xuegod.txt [root@Centos83 ~]# locate mygod.txt #发现找不到文件[root@Centos83 ~]# updatedb #如果对当天文件查找，需要手动更新数据库updatedb [root@Centos83 ~]# locate mygod /opt/mygod.txt/opt/mygod_dump1/var/test/mygod/var/test/mygod/abc ``` **grep 查找使用** **作用：过滤,它能够使用正则表达式来搜索文本，并把结果打印出来** **参数：** **-v 取反** **-i 忽略大小写** **^# 以#开头** **#$ 以#结尾** **^$ 空行** **-n 对过滤的内容加上行号** **| 或者的意思** ```sh [root@Centos83 ~]# ps -aux | grep sshd | grep -v greproot 1084 0.0 0.2 94436 2140 ? Ss 7月02 0:00 /usr/ [root@Centos83 ~]# cat /etc/passwd | grep ^a #以 a 开头 [root@Centos83 ~]# grep bash$ /etc/passwd #以 bash 结尾 [root@Centos83 ~]# grep "nologin\|root" /etc/passwd | wc -l #\ 表示转义符46 [root@Centos83 ~]# egrep "nologin|root" /etc/passwd | wc -l #查看包括 nologin 或 root 的行46 ``` **egrep 是 grep 加强版本** ### 11.3.3 find 命令使用 格式：find pathname -options [-print] 命令字 路径名称 选项 输出 参数： pathname: find 命令所查找的目录路径，不输入代表当前目录例如用 . 来表示当前目录，用 / 来表示系统根目录。 find 命令选项: -name 按照文件名查找文件。 “名称” -perm 按照文件权限来查找文件。666 777 等 -user 按照文件属主来查找文件 -group 按照文件所属的组来查找文件 -mtime -n / +n 按照文件的更改时间来查找文件， - n 表示文件更改时间距现在 n 天以内 + n表示文件更改时间距现在 n 天以前 + -type 查找某一类型的文件 + b - 块设备文件 + d - 目录 + c - 字符设备文件 + p - 管道文件 + l- 符号链接文件 + f - 普通文件 -size n 查找符合指定的文件大小的文件 -exec 对匹配的文件执行该参数所给出的其他 linux 命令， 相应命令的形式为' 命令 {} \;，注意{ }和 \；之间的空格，{}代表查到的内容 ```sh [root@Centos83 ~]# find . -name "*.txt" #查看当前目录下所有的 TXT 格式的文件 ``` 2、按照更改时间或访问时间等查找文件 如果希望按照更改时间来查找文件，可以使用 mtime,atime 或 ctime 选项 mtime: 文件最后一次修改的时间 atime: 最后一次访问时间 ctime: 文件的最后一次变化时间，也就是修改时间 ```sh [root@Centos83 ~]# find /root/ -mtime -1 #查找更改时间在 1 天以内，被***修改的文件 ``` 对查找内容执行相应命令 -exec 这个选项参数后面可以跟自定义的 SHELL 命令，格式如下：  ```sh [root@Centos83 ~]# find /root -name "*.txt" -exec cp {} /opt/ \; #把查找到的文件复制到一个指定的目录 ``` **xargs 和 find 命令结合 复制文件 -i 表示 find 传递给 xargs 的结果 由{}来代替** **查找多个类型文件** 比较符的使用： -a and 并且 -o or 或者 +超过 -低于 **按权限查找：-perm** ```sh [root@Centos83 ~]# find /bin/ -perm 755 # 等于 0755 权限的文件或目录 [root@Centos83 ~]# find /bin/ -perm -644 # -表示至少，至少有 644 权限的文件或目录 [root@Centos83 ~]# find /bin/ -perm -777 #至少有 777 权限 [root@Centos83 ~]# find / -type f -perm -777 #把系统中权限不低于 777 的危险文件查找出来 ``` 查找的目录深度： -maxdepth 1 #只查找目录第一层的文件和目录 查找/bin 目录下权限等于 644 的文件 ```sh [root@Centos83 ~]# find /bin/ -maxdepth 1 -perm 755 #/bin 后面要有/ [root@Centos83 ~]# find /bin -maxdepth 1 -perm 755 #没加/无法满足我们的需求 ``` ## 11.4 命令判断 ### 11.4.1 常用的三个特殊符号 1、 **；分号** 不考虑指令的相关性，连续执行, 分号； 不保证命令全部执行成功的 ```sh [root@Centos83 ~]# ofc ; echo aa ``` **&& 逻辑与**====》它是只有在前面的命令执行成功后，后面的命令才会去执行 如果/opt 目录存在，则在/opt 下面新建一个文件test.txt ``` [root@Centos83 ~]# cd /opt/ && touch /opt/test.txt && ls ``` 2、 **|| 逻辑或**===》如果前面的命令执行成功，后面的命令就不去执行了；或者如果前面的执行不成功，才会去执行后面的命令 ```sh [root@Centos83 mnt]# ls /etc/passwd || cd /etc/etc/passwd ``` 总结： 命令情况 说 明 命令 1 && 命令 2 如果命令 1 执行，且执行正确($? = 0)，然后执行命令 2 如果命令 1 执行完成，但是执行错误（$? ≠0），那么后面的命令是不会执行的 命令 1 || 命令 2如果命令 1 执行，且执行正确($? = 0)，那么命令 2 不执行 如果命令 1 执行，但执行错误($? ≠ 0)，那么命令 2 执行 运算顺序：LINUX 执行命令，是从左到右一个一个执行,从上到下执行 **总结：** **11.1 文件描述符 0、1、2** **11.2 重定向的含义-管道的使用-tee 命令** **11.3 which-whereis-locate-grep-find 查找命令** **11.4 命令判断**
