`
truemylife
  • 浏览: 230892 次
  • 性别: Icon_minigender_1
  • 来自: 杭州
文章分类
社区版块
存档分类
最新评论

linux shell 管道命令(pipe)使用及与shell重定向区别

阅读更多

原文地址:http://www.cnblogs.com/chengmo/archive/2010/10/21/1856577.html

看了前面一节:linux shell数据重定向(输入重定向与输出重定向)详细分析 估计还有一些朋友是头晕晕的,好复杂的重定向了。这次我们看下管道命令了。shell管道,可以说用法就简单多了。

 

管道命令操作符是:”|”,它仅能处理经由前面一个指令传出的正确输出信息,也就是 standard output 的信息,对于 stdandard
error 信息没有直接处理能力。然后,传递给下一个命令,作为标准的输入 standard input.

 

  • 管道命令使用说明:

先看下下面图:

image

command1正确输出,作为command2的输入 然后comand2的输出作为,comand3的输入 ,comand3输出就会直接显示在屏幕上面了。

通过管道之后:comand1,comand2的正确输出不显示在屏幕上面

注意:

1、管道命令只处理前一个命令正确输出,不处理错误输出

2、管道命令右边命令,必须能够接收标准输入流命令才行。

实例:


[chengmo@centos5 shell]$ cat test.sh | grep -n 'echo'
5:    echo "very good!";
7:    echo "good!";
9:    echo "pass!";
11:    echo "no pass!";
#读出test.sh文件内容,通过管道转发给grep 作为输入内容
 
[chengmo@centos5 shell]$ cat test.sh test1.sh | grep -n 'echo'
cat: test1.sh: 没有那个文件或目录
5:    echo "very good!";
7:    echo "good!";
9:    echo "pass!";
11:    echo "no pass!";
#cat test1.sh不存在,错误输出打印到屏幕,正确输出通过管道发送给grep
 
 
[chengmo@centos5 shell]$ cat test.sh test1.sh 2>/dev/null | grep -n 'echo' 
5:    echo "very good!";
7:    echo "good!";
9:    echo "pass!";
11:    echo "no pass!";
#将test1.sh 没有找到错误输出重定向输出给/dev/null 文件,正确输出通过管道发送给grep
 
 
[chengmo@centos5 shell]$ cat test.sh | ls
catfile httprequest.txt secure test  testfdread.sh testpipe.sh testsh.sh testwhile2.sh
envcron.txt  python sh  testcase.sh  testfor2.sh testselect.sh  test.txt  text.txt
env.txt  release   sms testcronenv.sh  testfor.sh test.sh  testwhile1.sh
#读取test.sh内容,通过管道发送给ls命令,由于ls 不支持标准输入,因此数据被丢弃

 

这里实例就是对上面2点注意的验证。作用接收标准输入的命令才可以用作管道右边。否则传递过程中数据会抛弃。 常用来作为接收数据管道命令有:sed,awk,cut,head,top,less,more,wc,join,sort,split 等等,都是些文本处理命令。

  • 管道命令与重定向区别

区别是:

1、左边的命令应该有标准输出 | 右边的命令应该接受标准输入
   左边的命令应该有标准输出 > 右边只能是文件
   左边的命令应该需要标准输入 < 右边只能是文件

 

2、管道触发两个子进程执行"|"两边的程序;而定向是在一个进程内执行

这些都是网上总结很多的,其实只要多加清楚用法,也一定有自己的一份不同描述。

实例:

#可以相互转换情况
#输入重定向
 
[chengmo@centos5 shell]$ cat test.sh| grep -n 'echo'
5:    echo "very good!";
7:    echo "good!";
9:    echo "pass!";
11:    echo "no pass!";
#"|"管道两边都必须是shell命令
 
 
[chengmo@centos5 shell]$ grep -n 'echo' <test.sh   
5:    echo "very good!";
7:    echo "good!";
9:    echo "pass!";
11:    echo "no pass!";
#"重定向"符号,右边只能是文件(普通文件,文件描述符,文件设备)
 
 
[chengmo@centos5 shell]$ mail -s 'test' 8292669@qq.com <test.sh
[chengmo@centos5 shell]$ cat test.sh|mail -s 'test' 8292669@qq.com
#以上2个也相同,将test.sh内容发送到指定邮箱。
 
 
[chengmo@centos5 shell]$ (sed -n '1,$p'|grep -n 'echo')<test.sh
5:    echo "very good!";
7:    echo "good!";
9:    echo "pass!";
11:    echo "no pass!";
# 这个脚本比较有意思了。由于前面是管道,后面需要把test.sh内容重定向到 sed ,
然后sed输出通过管道,输入给grep.需要将前面用"()"运算符括起来。在单括号内的命令,
可以把它们看作一个象一个命令样。如果不加括号 test.sh就是grep 的输入了。
 
 
#上面一个等同于这个
[chengmo@centos5 shell]$ sed -n '1,$p'<test.sh | grep -n 'echo'
5:    echo "very good!";
7:    echo "good!";
9:    echo "pass!";
11:    echo "no pass!";
 
#重定向运算符,在shell命令解析前,首先检查的(一个命令,执行前一定检查好它的输入,
输出,也就是0,1,2 设备是否准备好),所以优先级会最高
 
 
[chengmo@centos5 shell]$ sed -n '1,10p'<test.sh | grep -n 'echo' <testsh.sh
10:echo $total;
18:echo $total;
21:     echo "ok";
#哈哈,这个grep又接受管道输入,又有testsh.sh输入,那是不是2个都接收呢。刚才说了
"<"运算符会优先,管道还没有发送数据前,grep绑定了testsh.sh输入,这样sed命令输出就被
抛弃了。这里一定要小心使用
 
#输出重定向
 
[chengmo@centos5 shell]$ cat test.sh>test.txt
[chengmo@centos5 shell] cat test.sh|tee test.txt &>/dev/null
#通过管道实现将结果存入文件,还需要借助命令tee,它会把管道过来标准输入写入文件test.txt,
然后将标准输入复制到标准输出(stdout),所以重定向到/dev/null 不显示输出
#">"输出重定向,往往在命令最右边,接收左边命令的,输出结果,重定向到指定文件。
也可以用到命令中间。
 
 
[chengmo@centos5 shell]$ ls test.sh test1.sh testsh.sh 2>err.txt | grep 'test'
test.sh
testsh.sh
#目录下面有:test,testsh文件,test1.sh不存在,因此将ls 命令错误输出输入到err.txt
正确输出,还会通过管道发送到grep命令。
[chengmo@centos5 shell]$ ls test.sh test1.sh testsh.sh &>err.txt | grep 'test'
#这次打印结果是空,&代表正确与错误输出 都输入给err.txt,通过管道继续往下面传递数据为空,
所以没有什么显示的
#同样">"输出重定向符,优先级也是先解析,当一个命令有这个字符,它就会与左边命令标准输出绑定。
准备好了这些,就等待命令执行输出数据,它就开始接收

 

再概括下:

从上面例子可以看,重定向与管道在使用时候很多时候可以通用,其实,在shell里面,经常是【条条大路通罗马】的。一般如果是命令间传递参数,还是管道的好,如果处理输出结果需要重定向到文件,还是用重定向输出比较好。

命令执行顺序可以看下:Linux Shell 通配符、元字符、转义符使用实例介绍

 

 

  • shell脚本接收管道输入

有意思的问题:

既然作用管道接收命令,需要可以接收标准的输入,那么我们shell脚本是否可以开发出这样的基本程序呢?(大家经常看到的,都是一些系统的命令作为管道接收方)

实例(testpipe.sh):

 
1
2
3
4
5
6
7
8
9
10
11
12
13
14
#!/bin/sh
  
 if [ $# -gt 0 ];then
     exec 0<$1;
#判断是否传入参数:文件名,如果传入,将该文件绑定到标准输入
 fi
  
 while read line
 do
     echo $line;
 done<&0;
#通过标准输入循环读取内容
 exec 0&-;
#解除标准输入绑定

运行结果:

 
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
[chengmo@centos5 shell]$ cat testpipe.txt
1,t,est pipe
2,t,est pipe
3,t,est pipe
4,t,est pipe
#testpipe.txt 只是需要读取的测试文本
 
[chengmo@centos5 shell]$ cat testpipe.txt | sh testpipe.sh
1,t,est pipe
2,t,est pipe
3,t,est pipe
4,t,est pipe
#通过cat 读取 testpipe.txt 发送给testpipe.sh 标准输入
 
[chengmo@centos5 shell]$ sh testpipe.sh testpipe.txt     
1,t,est pipe
2,t,est pipe
3,t,est pipe
4,t,est pipe
#testpipe.sh 通过出入文件名读取文件内容
分享到:
评论

相关推荐

    北邮linux开发环境实验报告

    在本实验报告中,我们将深入探讨“北邮Linux开发环境”的相关知识,特别是Shell管道(Pipe)和重定向(Redirection)功能的实现,以及如何利用这些工具生成TCP活动状况报告。这一实验属于北京邮电大学计算机科学与...

    编的一个linux Shell ,能实现管道,重定向,以及一些基本的Shell 编程功能.zip

    Linux Shell 是一个命令行解释器,它为用户提供了与操作系统交互的界面,允许用户执行各种系统操作、管理文件和运行程序。在这个项目中,我们创建了一个自定义的Shell,它具备了基本的Shell编程功能,如管道(pipe)...

    linuxshell命令unixshell命令教程续

    Linux Shell和Unix Shell是两种广泛使用的命令行解释器,它们为用户提供了一个与操作系统交互的界面。在本教程中,我们将深入探讨这两个环境的基础知识,帮助初学者更好地理解和使用Shell。 首先,让我们了解一下...

    实验6shell linux系统

    通过本实验,我们可以掌握 Shell 编程的基础知识,包括如何编写简单的 Shell 程序,如何使用基本的 Linux 命令,如何使用管道和重定向符号来实现复杂的任务。 Shell 编程的应用非常广泛,可以用于实现各种自动化...

    Linux的shell命令解释器

    本项目实现了一个基本的shell命令解释器,包括了对管道、重定向、改变当前目录以及显示历史记录等功能,这些都是在日常Linux使用中不可或缺的部分。 1. **Shell命令解释器**:Shell的主要工作是接收用户输入的命令...

    LINUX SHELL编程从初学到精通

    1. Shell基础:学习Shell的基本语法和结构,包括变量定义、基本命令的使用、输入输出重定向、管道(pipe)的使用等。这些基础知识是编写Shell脚本不可或缺的。 2. 脚本编写:掌握如何编写Shell脚本,通常以#!/bin/...

    Linux实验八:LinuxC-编程-IO-重定向和管道.doc

    命名管道(FIFO)与无名管道类似,但区别在于它是一个持久化的文件,可以在不同的时间由不同的进程读写。`demo4.c`创建了一个名为`fifo`的命名管道,`mkfifo()`函数用于此目的。之后,可以通过`open()`函数像操作...

    Linux Shell PPT

    Linux Shell是Linux操作系统中的一种命令行解释器,它允许用户与计算机进行交互。Shell不仅仅是一个程序,它还是一个强大的工具,能够执行系统命令、管理文件、自动化任务等。在Linux中,最常用的Shell是Bash...

    Linux shell

    Linux Shell是操作系统与用户交互的重要接口,它是一个命令行解释器,允许用户通过文本命令来控制计算机。在本文中,我们将深入探讨如何基于C语言构建一个支持多重管道(multiple pipes)和重定向(redirection)功能的...

    LINUX SHELL脚本攻略 中文版

    2. **输入/输出重定向**:讲解如何利用重定向将命令的输出导向文件,或者从文件读取输入,以及管道(pipe)的使用,使多个命令协同工作。 3. **正则表达式**:正则表达式在文本处理中起到关键作用,书中会深入讲解...

    linux shell解析程序源码

    实现管道需要理解I/O重定向,并使用`pipe()`和`fork()`系统调用来创建子进程并设置管道。 6. **错误处理**:良好的错误处理机制是任何程序的基础。当用户输入的命令格式有误或找不到相应的命令时,Shell需要提供...

    LINUX SHELL脚本攻略(中文版带书签)

    1. **输入/输出重定向**:学习如何改变命令的标准输入、输出和错误流,以及使用管道(pipe)和重定向符号(如`&gt;`、`、`&gt;&gt;`等)。 2. **条件表达式与文件测试**:掌握各种比较运算符和文件测试运算符,用于在脚本中...

    shell命令解析器

    Shell命令解析器是Linux操作系统中的一个核心组件,它充当用户与操作系统内核之间的接口,使得用户可以通过命令行界面执行各种操作。在本文中,我们将深入探讨shell命令解析器的工作原理,以及如何使用C语言编程来...

    从Linux程序中执行shell(程序、脚本)并获得输出结果

    在Linux程序中,有时我们需要执行shell命令并获取其输出结果,以便在程序内部处理或显示。这通常是通过几种不同的方法实现的,包括使用临时文件、匿名管道和`popen`函数。下面详细介绍这些方法。 1. **使用临时文件...

    linux shell脚本

    - **管道(pipe)**:使用`|`连接命令,将一个命令的输出作为另一个命令的输入。 6. **文件和目录操作** - **路径和通配符**:`.`代表当前目录,`..`代表上一级目录,`*`和`?`用于匹配文件名。 - **命令**:`cd`...

    Linux_Shell-programming.zip_Linux shell_linux

    5. **管道(Pipe)**:用竖线`|`连接两个命令,将前一个命令的输出作为后一个命令的输入,实现命令间的串联。 6. **函数**:在Shell脚本中定义函数可重复使用代码段,提高代码的组织性和可读性。 7. **脚本执行...

Global site tag (gtag.js) - Google Analytics