linux文本分析awk基础命令介绍(8)(linux文本操作命令)

编辑：rootadmin

推荐整理分享linux文本分析awk基础命令介绍(8)(linux文本操作命令)，希望有所帮助，仅作参考，欢迎阅读内容。

文章相关热门搜索词:linux 文本分割,linux 文本操作,linux 文本,linux文本操作命令,linux 文本,linux文本处理常用命令,linux文本处理实验,linux文本分析工具操作过程,内容如对您有帮助，希望把文章链接给更多的朋友！

awk是一种模式扫描和处理语言，在对数据进行分析处理时，是十分强大的工具。

awk [options] 'pattern {action}' file...

awk的工作过程是这样的：按行读取输入(标准输入或文件)，对于符合模式pattern的行，执行action。当pattern省略时表示匹配任何字符串；当action省略时表示执行'{print}'；它们不可以同时省略。每一行输入，对awk来说都是一条记录(record)，awk使用$0来引用当前记录：

例子中将命令head -1 /etc/passwd作为awk的输入，awk省略了pattern，action为print $0，意为打印当前记录。对于每条记录，awk使用分隔符将其分割成列，第一列用$1表示，第二列用$2表示...最后一列用$NF表示

选项-F表示指定分隔符如输出文件/etc/passwd第一行第一列(用户名)和最后一列(登录shell)：

当没有指定分隔符时，使用一到多个blank(空白字符，由空格键或TAB键产生)作为分隔符。输出的分隔符默认为空格。如输出命令ls -l *的结果中，文件大小和文件名：

还可以对任意列进行过滤：

其中$5>表示第五列的值大于；&&表示逻辑与；$NF ~ /txt$/中，~表示匹配，符号//内部是正则表达式。这里省略了action，整条awk语句表示打印文件大小大于字节并且文件名以txt结尾的行。

awk用NR表示行号

例子中||表示逻辑或，语句表示：输出文件/etc/passwd中以root开头的行或者第二行。

在一些情况下，使用awk过滤甚至比使用grep更灵活如获得ifconfig的输出中网卡名及其对应的mtu值

以上所说的NR、NF等都是awk的内建变量，下面列出部分常用内置变量

awk中还可以使用自定义变量，如将网卡名赋值给变量a，然后输出网卡名及其对应的RX bytes的值(注意不同模式匹配及其action的写法)：

awk中有两个特殊的pattern：BEGIN和END；它们不会对输入文本进行匹配，BEGIN对应的action部分组合成一个代码块，在任何输入开始之前执行；END对应的action部分组合成一个代码块，在所有输入处理完成之后执行。

awk还支持数组，数组的索引都被视为字符串(即关联数组)，可以使用for循环遍历数组元素如输出文件/etc/passwd中各种登录shell及其总数量

当然也有if分支语句

pattern之间可以用逗号分隔，表示从匹配第一个模式开始直到匹配第二个模式

还支持三目操作符pattern1 &#; pattern2 : pattern3，表示判断pattern1是否匹配，true则匹配pattern2，false则匹配pattern3，pattern也可以是类似C语言的表达式。如判断文件/etc/passwd中UID大于的登录shell是否为/bin/bash，是则输出整行，否则输出UID为0的行：

选项-f file表示从file中读取awk指令

选项-F指定列分隔符

选项-v var=val设定变量

print等函数还支持使用重定向符>和>>将输出保存至文件

内建函数length()获得字符串长度

split()将字符串按分隔符分隔，并保存至数组

getline从输入(可以是管道、另一个文件或当前文件的下一行)中获得记录，赋值给变量或重置某些环境变量

next作用和getline类似，也是读取下一行并覆盖$0，区别是next执行后，其后的命令不再执行，而是读取下一行从头再执行。

sub(regex,substr,string)替换字符串string(省略时为$0)中首个出现匹配正则regex的子串substr

gsub(regex,substr,string)与sub()类似，但不止替换第一个，而是全局替换

substr(str,n,m)切割字符串str，从第n个字符开始，切割m个。如果m省略，则到结尾

tolower(str)和toupper(str)表示大小写转换