澳门网络娱乐游戏平台-澳门电子游戏娱乐网址-官方直营

澳门苹果官网Linux教程之文件描述符、重定向、管道符、tee命令

澳门苹果官网 ,本节讨论一下几个问题:

bash&shell系列文章:http://www.cnblogs.com/f-ck-need-u/p/7048359.html**

1. 文件描述符。


2. 重定向。

1.8.1 匿名管道"|"

管道符号意如其名,类似管道一样将管道入口的数据通过管道传递给管道出口。

管道是为了解决进程间通信问题而存在,它可以让两个进程之间的数据进行传递,将一个进程的输出数据传递给另一个进程作为其输入数据。管道左边是数据给予方,管道右边是数据接收方。

例如echo "abcd" | passwd --stdin username,表示将进程echo的输出结果"abcd"作为进程passwd的输入数据。

基本的管道符号及其用法很容易理解。现在的疑问是,对于ps aux | grep "ssh" ,为什么在结果里会有grep进程出现?

[root@xuexi ~]# ps aux | grep ssh
root       1211  0.0  0.1  82544  3600 ?        Ss   Jul26   0:00 /usr/sbin/sshd -D
root      25236  0.0  0.2 145552  5524 ?        Ss   05:28   0:00 sshd: root@pts/0
root      25720  0.1  0.2 145416  5524 ?        Ss   06:15   0:00 sshd: root@pts/1
root      25770  0.0  0.0 112648   948 pts/1    S+   06:15   0:00 grep --color=auto ssh

按一般想法,先执行了ps,得到输出后将输出数据传递给grep,这时候grep还没运行而ps已经运行完毕了,为什么还能统计到grep进程的信息呢?原因是管道实现的是进程间通信,两个进程之间存在交叉,在运行ps进程后开始收集进程信息,grep也已经开始并处于等待接收数据状态,当ps收集到任何数据后都将输出放入内存由管道传递给grep进行筛选。

管道其本质是数据传递,管道左边的输出数据放入内存,由管道右边的进程读取。假如内存不足以完全存放输出数据,则管道左边的进程将一直等待,直到管道右边取出内存中一部分的数据以让管道左边的进程继续输出,而管道右边的进程在管道左边的进程启动后也立刻启动了,但是它一直处于等待状态,等待接收管道传递来的数据。

也就是说,管道左右两边的进程运行几乎是没有先后顺序的。

那么ps aux | grep "ssh"如何避免结果中出现grep自身的进程呢?方法有二:

方法一:ps aux | grep "ssh" | grep -v "grep"

方法二:ps aux | grep "ss[h]"

[root@xuexi ~]# ps aux | grep ss[h]
root       1211  0.0  0.1  82544  3600 ?        Ss   Jul26   0:00 /usr/sbin/sshd -D
root      25236  0.0  0.2 145552  5524 ?        Ss   05:28   0:00 sshd: root@pts/0
root      25720  0.0  0.2 145416  5524 ?        Ss   06:15   0:00 sshd: root@pts/1

方法一是应用grep的"-v"特性,方法二是应用正则表达式的特性。

在使用匿名管道的过程中,可能已经发现管道两边的进程是同属一个进程组的,也就是说管道左方的数据只能传递给管道右方的进程,其他任何进程都没法读取此数据。但除了匿名管道,还有命名管道,命名管道是将一个进程的数据存储到一个管道文件(fifo)中,其他进程可以读取该管道文件来读取其中的数据,也就是说不再限制数据读取方。关于命名管道,请参阅Linux/unix操作系统内核或编程类的书籍,一般都会有详细的介绍。

3. 管道符

1.8.2 重定向

4. tee的用法。

1.8.2.1 重定向基础

最常见的标准输入(stdin)、标准输出(stdout)和标准错误输出(stderr)的文件描述符分别是0、1和2,其中0、1、2也可以认为是它们的数字代号。对于输出信息,可以认为是打印在屏幕上的信息,而没给出错误的就是标准输出,给出错误提示的是标准错误输出,当然这样说明有失偏颇,但是易于理解。还可以自定义自己的描述符,实现高级重定向,在以后的文章中可能会介绍一下它们的用法。

标准输入 = /dev/stdin   = 代号0 = <符号(注意,没有包含<<符号)。

标准输出 = /dev/stdout = 代号1 = >或>>符号。

标准错误输出 = /dev/stderr = 代号2 = 使用2>或2>>符号。

注意,上面的/dev/std{in,out,err}分别是0、1、2默认的输出目标,当重定向后,就不再使用这些目标。具体见后文。

<、>、2>实现的是覆盖功能,>>、2>>实现的是追加的功能,但是注意"<<"不是追加功能,而是表示此处生成文档(here document),在后面cat和重定向配合的内容里有说明。此外,还有<<<,它表示此处字符串(here string),也见下文。

有时候,使用"-"也表示/dev/stdin。如:

[root@xuexi ~]# cat /etc/fstab | cat -

脚本中常见2>&1和&>以及&>>的符号,它们都表示将stdout和stderr都重定向到同一个地方去,即重定向所有输出内容。如最常见的"&> /dev/null"。

注意:

(1).重定向操作是shell最先解析到的,在执行命令之前,重定向就会先打开文件以确定输入、输出的位置。如果是重定向输出操作,则先截断文件使其为空,即使是追加重定向亦如此。

(2)./dev/stdin、/dev/stdout、/dev/stderr等设备只是数据默认的流向目标(严格地说是文件描述符0、1、2的输出目标),它们不等价于"标准输入0、标准输出1、标准错误2"。之所以称为"重定向",就是将数据的流向改变,不再输入到这些默认设备中。

(3).重定向的顺序很重要。

例如 ls / >file1 2>&1 表示先打开file1作为标准输出(fd=1)的目的地,然后再将标准错误绑定到标准输出(已经是file1)上,这样无论是标准错误还是标准输出都重定向到file1中。它等价于 ls / &>file1 。"&"符号表示描述符重用(fd 2 duplicate from fd 1),有些人将其翻译为文件描述符的复制, 2>&1 翻译为标准错误是标准输出的复制、副本,这样的翻译非常容易产生误解,且很难结合已有知识去理解清楚。关键是很多书上就是这么解释的,让人费解,误导一大片人以为这是高级重定向。直接将其理解为文件描述符2绑定到文件描述符1上,或者文件描述2重用文件描述符1即可。

而 ls / 2>&1 >file1 表示先将标准错误绑定到标准输出,此时标准输出还是/dev/sdtout(即屏幕),因此标准错误的输出目标是/dev/stdout(屏幕)。之后再打开file1作为标准输出的目标。因此,它最终将标准错误重定向到/dev/stdout,将标准输出重定向到file1。可以让ls命令产生错误来测试, ls dlfjasl 2>&1 >file1 ,结果将直接显示在屏幕上**。 **

将stdout或stderr丢到/dev/null表示丢弃输出信息,反过来,将/dev/null重定向到某个文件则表示清空文件。

[root@xuexi ~]# cat /dev/null > ab.sh

除此,还有以下几种方法快速清空文件

[root@xuexi ~]# > ab.sh
[root@xuexi ~]# : > ab.sh             # 或"true >ab.sh",其实它们都等价于">ab.sh"
[root@xuexi ~]# echo '' > ab.sh
[root@xuexi ~]# truncate -s 0 ab.sh   # truncate命令用于收缩和扩展文件大小
[root@xuexi ~]# dd if=/dev/null of=ab.sh

再次说明(很重要):在有输出类的重定向(包括错误重定向)语句中,命令执行之前就已经将文件截断为0大小。所以如果正在编辑一个文件并将编辑的结果重定向回这个文件将出现异常,因为截断后就没有合适的内容用于编辑。一个简单的示例如下:

[root@xuexi ~]# head a.log > a.log

有些时候直接使用">"覆盖输出是比较危险的。可以使用set -C来设置如果输出重定向文件已经存在则不覆盖。使用set +C来取消set -C的效果。如果在设置了set -C时仍然想强制覆盖,可以使用“>|”代替“>”来重定向输出。同理错误输出也有此特性。

[root@xuexi tmp]# set -C

[root@xuexi tmp]# cat flip >ttt.txt
-bash: ttt.txt: cannot overwrite existing file

[root@xuexi tmp]# cat flip >| ttt.txt

[root@xuexi tmp]# set +C

1. 文件描述符。

在Linux系统中一切皆文件。文件夹和设备都是文件。如何用来区别不同的文件呢?这里的区别不是我们在Windows下看到的后缀名不同来区别。也不是我们在Linux下用ls 命令看到的不同文件的列表。这里的文件描述符主要讨论的是对文件操作的一个标识符。无操作就无标识符。   比如两个进程同时在对同一个文件进行读操作。

如何区分这两个读操作呢?这就需要文件文件描述符来区别了。每一次打开一个文件就形成了一个文件描述符,后打开的描述符一般都要比先打开的文件描述符大。

比如:我们可以man 一下 open函数。 看一下返回值:

  [root@xiaolyu ~]# man open

澳门苹果官网 1

也就是说文件描述符是一个整数。当然了,系统默认最大是1024. 我们不妨用ulimit -n 来查看一下。**

澳门苹果官网 2

我们也可以查看一下:man socket 一下 看一下效果:

澳门苹果官网 3

 也就是说文件描述符可以通过多种途径来生成。记住:只要对文件进行操作,就会返回文件描述符。

然后我们来看看系统自带的3个文件描述符。

澳门苹果官网 4

这三个是最小的文件描述符,我们自己操作文件,返回的文件描述符最小都是从4开始的。

stdin   标准输入  默认的设备是键盘    文件描述符为:0 

命令将从标准输入文件中  读取  在执行过程中的 需要的  输入数据.  -->数据来源于文件

stdout 标准输出  默认的设备是 显示器  文件描述符为:1

命令执行后的输出结果,发送到标准输出文件.  -->结果输出到文件

stderr 标准错误   默认的设备是显示器  文件描述符为:2

 命令将执行期间的各种错误信息发送到标准错误文件 -->错误信息发送到文件

标准输入,标准输出和标准错误默认使用键盘和显示器作为关联设备与操作系统进行交互完成最基本的输入,输出操作.

我们不妨用man stdin 来看一下:[root@xiaolyu ~]# man stdin 

澳门苹果官网 5

 以上便是关于文件描述符。

1.8.2.2 cat和重定向配合

配合cat使用可以分行输入内容到文件中。

[root@xuexi tmp]# cat <<eof>log.txt   # 覆盖的方式输入到log.txt
> this is stdin character
> eof

也可以使用下面的方法。

[root@xuexi tmp]# cat >log1.txt <<eof 
> this is stdin character first!
> eof

一方面,eof部分都必须使用"<<eof",它表示here document,此后输入的内容都作为一个document输入给cat。既然是document,那就肯定有document结束符标记document到此结束,结束符使用的是here document后的字符,例如此处为eof。其实不使用eof,使用其他字符也是一样的,但document的结束符也必须要随之改变。如:

[root@xuexi ~]# cat <<abcx
> 123
> 345
> abcx
123
345

另一方面,>log1.txt表示将document的内容覆盖到log1.txt文件中,如果是要追加,则使用>>log1.txt。所以,追加的方式如下:

[root@xuexi tmp]# cat >>log1.txt <<eof 
> this is stdin character first!
> eof

[root@xuexi tmp]# cat <<eof>>log1.txt 
> this is stdin character first!
> eof

本文由澳门网络娱乐游戏平台发布于操作系统,转载请注明出处:澳门苹果官网Linux教程之文件描述符、重定向、管道符、tee命令

相关阅读