`

linux步步为营(7)--awk--xargs

 
阅读更多

参考http://www.cnblogs.com/ggjucheng/archive/2013/01/13/2858470.html

 

awk是一个强大的文本分析工具,有3个不同版本: awk、nawk和gawk,未作特别说明,一般指gawk,gawk 是 AWK 的 GNU 版本。

三种使用方式:1.命令行方式,2.shell脚本方式(略),

命令行语法1:

        awk [-F  field-separator]  'commands'  input-file(s)

        [-F域分隔符]是可选的,默认的域分隔符是空格/tab符号。对每行分域:$0(全部),$1,$2...

        commands 是真正awk命令,用{}分割成多个命令语句块。 

        input-file(s) 是待处理的文件。

 

命令行语法2:ll | awk [-F  field-separator]  'commands' 不需要input-file(s)

 

例子:

        //等效于 awk  -F ':'  '{print $1"\t"$7}' /etc/passwd

        cat /etc/passwd |awk  -F ':'  '{print $1"\t"$7}' 

        //BEGIN,END是内置变量

        cat /etc/passwd |awk  -F ':'  'BEGIN {print "name,shell"}{print $1","$7}END{print "blue,/bin/nosh"}'

        //搜索/etc/passwd有root关键字的所有行,(没有指定action,默认输出每行的内容)。

        cat /etc/passwd |awk -F ':' '/mysql/'                 

        //正则表达式用"//"不用"{}"                                

        cat /etc/passwd |awk -F ':' '/^mysql/{print $1","$2}'                 

        

        //统计/etc/passwd:文件名,每行的行号,每行的列数,对应的完整行内容:

        #cat /etc/passwd |awk -F ':'  '{print "filename:" FILENAME ",linenumber:" NR ",columns:" NF ",,,,,,,,,linecontent:"$0}' 

 

awk内置变量

        ARGC               命令行参数个数

        ARGV               命令行参数排列

        ENVIRON            支持队列中系统环境变量的使用

        FILENAME           awk浏览的文件名

        FNR                浏览文件的记录数

        FS                 设置输入域分隔符,等价于命令行 -F选项

        NF                 浏览记录的域的个数

        NR                 已读的记录数

        OFS                输出域分隔符

        ORS                输出记录分隔符

        RS                 控制记录分隔符

 

awk编程(多个指令语句)

        //统计/etc/passwd的账户人数

        cat /etc/passwd | awk '{c++;print $0;} END {print "user count = ",c}'

        //c是自定义变量。之前的action{}里都是只有一个print,其实print只是一个语句,而action{}可以有多个语句,以;号隔开。

        cat /etc/passwd | awk 'BEGIN {c=0;print "[start]user count = ", c} {c=c+1;print $0;} END{print "[end]user count = ", c}'

        //统计某个文件夹下的文件占用的字节数

        ls -l |awk 'BEGIN {size=0;} {size=size+$5;} END{print "[end]size is ", size}'

        [end]size is  8657198

        //如果以M为单位显示:

        ls -l |awk 'BEGIN {size=0;} {size=size+$5;} END{print "[end]size is ", size/1024/1024,"M"}' 

        [end]size is  8.25889 M

        

        awk条件语句,循环语句借鉴于C语言,支持if-else, while、do/while、for、break、continue

        //搜索第10列=="[0区]小小养乐多"的列

        cat heartListener.log.2015022012 | awk '{if($10=="[0区]小小养乐多"){print $0;}}'

 

反引号,把内容作为命令执行,不是字符串

        for id in `\cat catalina.out | \grep "nio socket, server" |awk '{print $8}' | awk -F ':' '{print $NF}'`

        do

         echo -n "${id}----"  ;   cat catalina.out | \grep -c "${id}" | sort -n

        done

 

xargs

        //合并成1行

        ps -ef | grep root |awk '{print $2}' |xargs 

        //合并成行(每行20个)

        ps -ef | grep root |awk '{print $2}' |xargs -n 20

        //并把合并后的值,作为参数传递给rm

        ll | awk '{print $8}' |xargs rm -fr

 

分享到:
评论

相关推荐

    VASP-poscar2lammps.awk

    VASP-poscar2lammps.awk

    Linux教程-linux文本处理-awk.docx

    Linux系统中的文本处理工具众多,其中awk是被誉为“文本处理三剑客”之一的重要成员。awk的名字来源于其三位创始人——Aho, Weinberger, Kernighan的首字母缩写,它最初是在AT&T实验室开发的。现在,我们最常见的awk...

    linux-shell脚本命令:awk命令简介

    Linux系统中的awk命令是一个功能强大的文本处理工具,它可以对输入(通常是文件)进行模式扫描和处理。awk命令常用于在Linux shell脚本中进行数据提取、文本转换、数据报告生成等操作。本文将对awk命令的基本知识...

    AWK-4121介绍

    ### AWK-4121系列室外无线AP/网桥/客户端关键技术知识点 #### 一、产品概述 AWK-4121是一款专为工业级应用设计的室外无线接入点/AP、网桥及客户端三合一设备。它适用于不易布线、布线成本较高或者需要在移动TCP/IP...

    Vim-101-hacks、Sed-and-Awk-101-Hacks、Linux-101-hacks 英文版(高清)PDF

    "Sed-and-Awk-101-Hacks"可能包含如何使用基本的sed命令,如替换、删除、插入行,以及使用地址范围进行特定操作。此外,还可能涉及正则表达式在sed中的应用,如查找和替换模式,以及使用sed进行批量文本编辑。 3. ...

    Curso-GNU-Linux-AWK-Bash-Git-RSG-y-iGEM-Ecuador

    Curso-GNU-Linux-AWK-Bash-Git-RSG-y-iGEM-厄瓜多尔

    AWK-file.rar_awk_awk tcl_delay awk_jitter awk _jitter ns-2

    7. **文件分析**: "AWK-file"很可能包含一系列的脚本或报告,这些脚本使用AWK语言解析和处理NS-2模拟输出的数据,从而得出网络性能的量化指标。 8. **性能优化**: 使用AWK进行这样的分析可以帮助网络工程师识别性能...

    linux命令--AWK用法简介

    《Linux命令——AWK用法详解》 AWK,一种在Unix/Linux系统中广泛使用的文本处理工具,源自三位杰出的计算机科学家Aho、Weinberg和Kernighan之名。与sed和grep类似,AWK也是一种样式扫描与处理工具,但它在功能上...

    Node.js-awkj--node版本的awk

    开发者可以将其集成到自己的 Node.js 项目中,以利用 awk-like 功能,而无需依赖操作系统提供的 awk 命令。 awkj-master 可能是指这个工具的源代码仓库主分支。通常,开源项目会以这种方式命名,"master" 表示这是...

    4-ns-udp.rar_AWK ns2_Linux UDP 文件_ns_ns cbr

    标题中的"4-ns-udp.rar_AWK ns2_Linux UDP 文件_ns_ns cbr"指的是一个使用NS-2(Network Simulator 2)模拟的Linux环境下UDP(User Datagram Protocol)网络通信场景。在这个模拟中,四点之间进行了连续比特率...

    Linux xargs 命令用法详解

    Linux xargs 命令 xargs 是给命令传递参数的一个过滤器,也是组合多个命令的一个工具。 xargs 可以将管道或标准输入(stdin)数据转换成命令行参数,也能够从文件的输出中读取数据。 xargs 也可以将单行或多行文本...

    gawk 3.1.6-1 windows中的awk

    可以在windows系统中使用linux中的awk命令。具体使用方法请参照linux版本的awk使用方法。 可以在windows系统中使用linux中的awk命令。具体使用方法请参照linux版本的awk使用方法

    MOXA_AWK-3121配置方法及要点说明

    MOXA AWK-3121 配置方法及要点说明 MOXA AWK-3121 是一种工业级无线设备,具有 web 功能配置、IP 网络参数设置、工作模式选择、功率增强等特点。本文将详细介绍 MOXA AWK-3121 的配置方法及要点说明。 一、Web ...

    awk--Linux awk 命令-基础知识概要

    AWK 是一种处理文本文件的语言,是一个强大的文本分析工具。 之所以叫 AWK 是因为其取了三位创始人 Alfred Aho,Peter Weinberger, 和 Brian Kernighan 的 Family Name 的首 字符。

    linux-awk-完全手册范本.doc

    "Linux awk 完全手册范本" awk 是一种功能强大的样式扫描和处理工具,能够完成 grep 和 sed 所能完成的全部工作,并且具有样式装入、流控制、数学运算符、进程控制语句、置的变量和函数等功能。awk 的优点是简单、...

    linux-利用tcpdump抓包和awk处理写的基于端口的流量统计

    在Linux环境中,网络流量监控是系统管理的重要环节,它可以帮助我们了解网络的健康状况、检测潜在的性能问题或安全威胁。本教程将详细介绍如何利用tcpdump进行网络数据包捕获,并通过awk工具进行后续的数据处理,以...

    p31668908_112040_Linux-x86-64

    标题 "p31668908_112040_Linux-x86-64" 和描述中的相同字符串可能代表一个特定的软件更新或补丁ID,适用于Linux操作系统,特别是针对x86-64架构的服务器。在Linux运维中,这样的ID通常用于追踪和应用软件或系统的...

    linux awk用法指南

    Linux AWK 用法指南 AWK 是一种强大的数据处理和文本处理工具,经常用于 Linux 和 Unix 系统中。AWK 的全称是 Aho, Weinberger 和 Kernighan,这三个名字来自三位开发者。AWK 的主要功能是从文件或字符串中基于指定...

Global site tag (gtag.js) - Google Analytics