awk使用

tomotoboy

浏览: 166884 次
性别:
来自: 成都

最近访客更多访客>>

Emperor220

zty461217

龙行天下-翔

顾晓勇

博主相关

博客

微博

相册

留言

关于我

文章分类

社区版块

存档分类

博客分类：

Shell

正则表达式脚本浏览器编程 F#

awk
调用awk有三种方式调用awk，第一种是命令行方式，如：

awk [-F field-separator] 'commands' input-file(s)

这里，commands是真正的awk命令。上面例子中，-F域分隔符]是可选的，因为a w k使用空格作为缺省的域分隔符，因此如果要浏览域间有空格的文本，不必指定这个选项，但如果要浏览诸如 passwd文件，此文件各域以冒号作为分隔符，则必须指明- F选项：

awk -F: 'commands' input-file

第二种方法是将所有a w k命令插入一个文件，并使 a w k程序可执行，然后用a w k命令解释器作为脚本的首行，以便通过键入脚本名称来调用它。
第三种方式是将所有的awk命令插入一个单独文件，然后调用：

awk -f awk_script_ file input_file(s)

- f选项指明在文件awk_script_ file中的a w k脚本，input_file(s)是使用awk进行浏览的文件名。

模式和动作
任何awk语句都由模式和动作组成。在一个awk脚本中可能有许多语句。模式部分决定动作语句何时触发及触发事件。处理即对数据进行的操作。如果省略模式部分，动作将时刻保持执行状态。模式可以是任何条件语句或复合语句或正则表达式。模式包括两个特殊字段BEGIN和END。使用BEGIN语句设置计数和打印头。BEGIN语句使用在任何文本浏览动作之前，之后文本浏览动作依据输入文件开始执行。 END语句用来在awk完成文本浏览动作后打印输出文本总数和结尾状态标志。如果不特别指明模式， awk总是匹配或打印行数。实际动作在大括号{ }内指明。动作大多数用来打印，但是还有些更长的代码诸如 if和循环（looping）语句及循环退出结构。如果不指明采取动作， awk将打印出所有浏览出来的记录。

域和记录
awk执行时，其浏览域标记为$1，$2 . . . $n。这种方法称为域标识。使用这些域标识将更容易对域进行进一步处理。使用$1,$3表示参照第1和第3域，注意这里用逗号做域分隔。如果希望打印一个有5个域的记录的所有域，不必指明 $1,$2,$3,$4 ,$5，可使用$0，意即所有域。awk浏览时，到达一新行，即假定到达包含域的记录末尾，然后执行新记录下一行的读动作，并重新设置域分隔。注意执行时不要混淆符号$和shell提示符$，它们是不同的。

打印所有域的信息

/home/l/g/tomotoboy >who
liuzk423   pts/6        Jul 20 08:27    (219.245.104.240)
tomotoboy   pts/16       Aug  7 23:33   (219.221.98.71)
liuqingaihn   pts/21       Aug  7 23:10 (116.29.229.116)
guise      pts/35       Aug  7 21:13    (58.41.162.27)
uyty       pts/38       Aug  7 22:09    (p3213-ipbf803souka.saitama.ocn.ne.jp)
yagamil    pts/46       Aug  7 20:48    (199.40.206.191)
/home/l/g/tomotoboy >who | awk '{print $0}'
liuzk423   pts/6        Jul 20 08:27    (219.245.104.240)
tomotoboy   pts/16       Aug  7 23:33   (219.221.98.71)
liuqingaihn   pts/21       Aug  7 23:10 (116.29.229.116)
guise      pts/35       Aug  7 21:13    (58.41.162.27)
uyty       pts/38       Aug  7 22:09    (p3213-ipbf803souka.saitama.ocn.ne.jp)
yagamil    pts/46       Aug  7 20:48    (199.40.206.191)

抽取第一域，并打印出来：

/home/l/g/tomotoboy >who|awk '{print $1}'
liuzk423
tomotoboy
liuqingaihn
guise
uyty
yagamil

打印第一域、第三域

/home/l/g/tomotoboy >who | awk '{print $1"\t"$3}'
liuzk423        Jul
tomotoboy       Aug
liuqingaihn     Aug
guise           Aug
uyty            Aug
yagamil         Aug

打印信息头和信息尾

/home/l/g/tomotoboy >who | awk  'BEGIN {print "--------BEGIN-------\n"} {print $1"\t"$3} END {print "----------END-------"}'
--------BEGIN-------

liuzk423        Jul
tomotoboy       Aug
liuqingaihn     Aug
guise   Aug
uyty    Aug
kenhq   Aug
yagamil Aug
----------END-------

如果第一个域等于tomotoboy

/home/l/g/tomotoboy >who | awk  '{if ($1~/tomotoboy/) print $0}'
tomotoboy   pts/16       Aug  7 23:33   (219.221.98.71)

如果行的域中包含tomotoboy就打印它

/home/l/g/tomotoboy >who | awk  '$0 ~/tomotoboy/'
tomotoboy   pts/16       Aug  7 23:33   (219.221.98.71)

不匹配

/home/l/g/tomotoboy >who | awk  '{if ($1!~/tomotoboy/) print $0}'
liuzk423   pts/6        Jul 20 08:27    (219.245.104.240)
uyty       pts/38       Aug  7 22:09    (p3213-ipbf803souka.saitama.ocn.ne.jp)
kenhq      pts/40       Aug  7 23:46    (116.77.50.7)
yagamil    pts/46       Aug  7 20:48    (199.40.206.191)

/home/l/g/tomotoboy >who | awk  '$0  !~/tomotoboy/'
liuzk423   pts/6        Jul 20 08:27    (219.245.104.240)
liuqingaihn   pts/21       Aug  7 23:54 (116.29.229.116)
uyty       pts/38       Aug  7 22:09    (p3213-ipbf803souka.saitama.ocn.ne.jp)
kenhq      pts/40       Aug  7 23:46    (116.77.50.7)
yagamil    pts/46       Aug  7 20:48    (199.40.206.191)

行首
打印行首包含to的行

/home/l/g/tomotoboy >who | awk  '/^to/'
tomotoboy   pts/16       Aug  7 23:33   (219.221.98.71)

AND
打印第一域为tomotoboy，第三域为Aug的行

/home/l/g/tomotoboy >who | awk  '{if ($1=/tomotoboy/ && $2=/Aug/) print $0}'
awk: syntax error near line 1
awk: illegal statement near line 1
/home/l/g/tomotoboy >who | awk  '{if ($1~/tomotoboy/ && $3~/Aug/) print $0}'
tomotoboy   pts/16       Aug  7 23:33   (219.221.98.71)

注意区分“=”与“==”，获得两种截然不同的结果

/home/l/g/tomotoboy >who | awk  '{if ($1="tomotoboy" && $3="Aug") print $0}'
tomotoboy pts/6 Aug 20 08:27 (219.245.104.240)
tomotoboy pts/16 Aug 7 23:33 (219.221.98.71)
tomotoboy pts/21 Aug 8 00:05 (116.29.229.116)
tomotoboy pts/35 Aug 8 00:05 (116.29.229.116)
tomotoboy pts/38 Aug 7 22:09 (p3213-ipbf803souka.saitama.ocn.ne.jp)
tomotoboy pts/40 Aug 7 23:46 (116.77.50.7)
tomotoboy pts/46 Aug 7 20:48 (199.40.206.191)

/home/l/g/tomotoboy >who | awk  '{if ($1=="tomotoboy" && $3=="Aug") print $0}'
tomotoboy   pts/16       Aug  7 23:33   (219.221.98.71)

awk内置变量

/home/l/g/tomotoboy >who|awk '{print NF,NR,$0}'
6 1 liuzk423   pts/6        Jul 20 08:27        (219.245.104.240)
6 2 tomotoboy   pts/16       Aug  7 23:33       (219.221.98.71)
6 3 liuqingaihn   pts/21       Aug  8 00:05     (116.29.229.116)
6 4 liuqingaihn   pts/35       Aug  8 00:05     (116.29.229.116)
6 5 uyty       pts/38       Aug  7 22:09        (p3213-ipbf803souka.saitama.ocn.ne.jp)
6 6 kenhq      pts/40       Aug  7 23:46        (116.77.50.7)
6 7 yagamil    pts/46       Aug  7 20:48        (199.40.206.191)

awk内置字符串函数
awk内置字符串函数，awk又很多字符处理函数，这里以length为例

/home/l/g/tomotoboy >who| awk '{print length($1)" "$1}'
8 liuzk423
9 tomotoboy
11 liuqingaihn
11 liuqingaihn
5 kenhq
7 yagamil

如果第一域的长度大于7就输出

/home/l/g/tomotoboy >who| awk '{if(length($1)>7) print length($1)" "$1}'
8 liuzk423
9 tomotoboy
11 liuqingaihn
11 liuqingaihn

字符串屏蔽序列
使用字符串或正则表达式时，有时需要在输出中加入一新行或查询一元字符。打印一新行时，（新行为字符\n），给出其屏蔽序列，以不失其特殊含义，用法为在字符串前加入反斜线。例如使用\n强迫打印一新行。如果使用正则表达式，查询花括号（{ }），在字符前加反斜线，如/ \ { /，将在awk中失掉其特殊含义。

\b 退格键      \t tab键
\f 走纸换页    \ddd 八进制值
\n 新行        \c 任意其他特殊字符，例如\\为反斜线符号
\r 回车键
/home/l/g/tomotoboy >who |awk '{print $1"\t""\t"$2"\n"}'
liuzk423                pts/6

tomotoboy               pts/16

liuqingaihn             pts/21

liuqingaihn             pts/35

kenhq                   pts/40

yagamil                 pts/46

printf
printf修饰符，prinf基本域C语言的printf相同下面开始举例

/home/l/g/tomotoboy >echo "65" |awk '{printf "%c\n",$0}'
A
/home/l/g/tomotoboy >echo "65" |awk '{printf "%d\n",$0}'
65
/home/l/g/tomotoboy >echo "65" |awk '{printf "%c\t\t%d\n",$0,$0}'
A               65

awk数组

/home/l/g/tomotoboy >awk 'BEGIN {print split("123#456#789",myarray,"#")}'
3

在上面的例子中，split返回数组myarray下标数。实际上myarray数组为：
myarray[1]=123
myarray[2]=456
myarray[3]=789
数组使用前，不必定义，也不必指定数组元素个数。经常使用循环来访问数组。下面是一种循环类型的基本结构：
For (element in array) print array[element]
对于记录“123#456#789” ，先使用split函数划分它，再使用循环打印各数组元素。操作脚本如下：

#!/bin/awk -f
#name: arraytest.awk
#pprint out am array
BEGIN{
record="123#456#789";
split(record,myarray,"#")}
END { for (i in myarray) {print myarray[i]}}

要运行脚本，使用/dev/null作为输入文件。

/home/l/g/tomotoboy >arraytest.awk /dev/null
456
789
123

小结
awk语言学起来可能有些复杂，但使用它来编写一行命令或小脚本并不太难。awk是shell编程的一个重要工具。在shell命令或编程中，虽然可以使用awk强大的文本处理能力，但是并不要求你成为这方面的专家

分享到：

线程对象的几个重要的方法 | shell中单引号和双引号的区别

2009-07-29 16:29
浏览 1394
评论(0)
查看更多

发表评论

您还没有登录,请您登录后再发表评论

最近访客更多访客>>

博主相关

文章分类

社区版块

存档分类

最新评论

awk使用

评论

发表评论

相关推荐

最近访客 更多访客>>

博主相关

文章分类

社区版块

存档分类

最新评论

awk使用

评论

发表评论

相关推荐

向脚本传递参数

shell函数

后台执行命令——守护进程创建

控制流结构——until、while、break、continue

控制流结构——for

控制流结构——case

控制流结构——if then else

条件控制（test，expr……）

再谈引号……

shell变量及环境变量

登陆环境

Trap命令详解

ulimit命令详解

tr用法

shell合并和分割

shell输入输出

sed用法介绍

shell中单引号和双引号的区别

grep用法详解

文本过滤

最近访客更多访客>>