在linux中，awk命令是文本数据处理工具，适合格式化文本文件，对文本文件进行更复杂的加工处理、分析，语法“awk [option] ‘pattern[action]’ file …”。awk具备强大的文本格式化能力，比如对一堆看起来没有什么规律的日志文件，文本文件等，通过awk命令之后，格式化输出为专业的可以做为应用级数据分析的样式。
本教程操作环境：linux7.3系统、Dell G3电脑。
Linux 系统中有一个功能更加强大的文本数据处理工具，就是 awk。它诞生于 20 世纪 70 年代末期，这也许是它影响了众多 Linux 用户的原因之一。
曾有人推测 awk 命令的名字来源于 awkward 这个单词。其实不然，此命令的设计者有 3 位，他们的姓分别是 Aho、Weingberger 和 Kernighan，awk 就取自这 3 为大师姓的首字母。
awk具备强大的文本格式化能力，比如对一堆看起来没有什么规律的日志文件，文本文件等，通过awk命令之后，格式化输出为专业的可以做为应用级数据分析的样式；
awk像是一门编程语言，支持条件判断，数组，循环等诸多的功能；
linux三剑客
grep，擅长单纯的查找或匹配文本内容；
sed，擅长文本编辑，处理匹配到的文本内容；
awk，适合格式化文本文件，对文本文件进行更复杂的加工处理、分析；
awk理论基础
1、awk语法
awk [option] 'pattern[action]' file ...awk 参数 条件动作 文件
action 是指动作，awk擅长文本格式化，且能输出格式化后的结果，因此最常用的动作就是 print 和 printf
2、awk处理文本内容模式
awk默认以空格为分隔符，且多个空格也识别为一个空格，作为分隔符；awk按行处理文件，一行处理完毕之后，再处理下一行；awk可以根据用户指定的分隔符去工作，没有指定，则默认为空格；
一、awk内置变量
$n指定分隔符后，当前的第n个列所在的字段$0完整的一行记录FS字段分隔符，默认是空格NF(Number of fields)字段分隔后，当前一共多少个字段NR(Number of records)当前记录数，行数
更多的内置变量，可通过 man awk命令进行查看
简单案例展示
提前准备一个文本，内容如下
1、输出第二列内容
awk '{print $2}' alx.txt
2、输出多列内容
直接在第一步后面的基础上追加，中间用 “,” 分割
awk '{print $2,$3}' alx.txt
3、查看第三行内容
考察对NR的使用，NR表示第N行记录的模式匹配
awk 'NR==3{print $0}' alx.txt
输出多行
awk 'NR==5,NR==6{print $0}' alx.txt
4、输出从第3到第五行，并显示行号
awk 'NR==3,NR==5 {print NR,$0}' alx.txt
5、自定义输出内容
某些情况下，需要给每一列添加类似于excel的表头信息，就可以考虑使用awk的自定义输出；
awk '{print "第一列: "$1,"第二列: "$2}' alx.txt
需要注意的是大括号外面的使用 ’ 单引号，括号里面的使用双引号
二、awk参数
-F指定分隔字段符-v定义或修改一个awk内部变量-f从脚本文件中读取awk命令
上文谈到，awk默认的字段分隔符为空格，但是像下面这样的文本，以 # 为分隔符，就需要用到自定义分隔符；
1、显示第一列和第二列内容
awk -F "#" '{print $1,$2}' zcy2.txt
2、显示文件第一列，倒是第一列，和倒数第二列的内容
awk '{print $1,$(NF-1),$(NF-2)}' alx.txt
3、取出本机的IP地址
使用awk的方式获取的话，如果以空格为分隔符，我们发现目标字段在第二行的第二列，使用下面的命令即可，看起来，比起sed和grep命令似乎更简单；
ifconfig eth0 | awk 'NR==2{print $2}'
4、取出密码文件中的第一列和最后一列
考察对自定义输入分隔符的使用，可以看到，下面的文本文件中，可以考虑使用 ： 进行分割；
awk -F ':' '{print $1,$NF}' pwd2.txt
三、OFS输出分隔符
通过上文的学习，我们知道awk命令执行后，默认采用空格分割字段，而这个空格就是默认的输出分割符，
单在某些情况下，为了将数据展示的效果更加醒目一些，就可以使用OFS的自定义输出分隔符；
仍然以上面的密码文本为例，输出第一列和最后一列的字段；
awk -F ':' -v OFS=' *** ' '{print $1,$NF}' pwd2.txt
该表默认输出分隔符，直接在awk后面使用: -v OFS=‘自定义输出分隔符’
四、awk变量
awk参数
-F指定分隔字段符-v定义或修改一个awk内部变量-f从脚本文件中读取awk命令
对于awk来讲，变量分为：内置变量和自定义变量
awk内置变量
FS输入字段分隔符，默认为空白字符OFS输出字段分隔符，默认为空白字符RS输入记录分隔符，指定输入时的换行符ORS输出记录分隔符，输出时用指定符号替换换行符NF当前行的字段个数，字段数量NR行号，当前处理文本行的行号FNR各文件分别计数的行号FILENAME当前文件名ARGC命令行参数个数ARGV数组，保存的是命令行所给定的各个参数
比较常用的内置变量包括： NR,NF，FNR
FILENAME 使用
FILENAME 为awk的内置变量，通过下面这个命令，可以看到在每行记录之前，输出了当前文件名称；
awk 'NR==1,NR==3{print FILENAME,$0}' alx.txt
ARGV使用
先来看下面这条命令的执行结果
awk 'NR==1,NR==3{print ARGV[0],ARGV[1],$0}' alx.txt
可以发现，在输出的每一行记录前面，拼上了 awk 和 alx.txt这两个字段，这两个字段就是这行命令整体解析出来的2个内置参数；
自定义变量
看下面这条命令输出效果，通过-v参数，可以自定义变量进行参数传递；
awk -v myname="zcy" 'BEGIN{print "我的名字是?" ,myname}'
五、awk格式化输出
在上文，我们接触的是awk的输出功能，主要使用了 print 这个进行输出，它只能对文本进行简单的输出，但是并不能美化或者修改输出格式；
printf 格式化输出
如果对C语言有过了解的同学，对printf 并不陌生，使用这个命令（函数）可以对文本进行格式化输出；
printf与print的几点区别
printf 需要指定format；format 用于指定后面的每个 item输出格式；printf 语句不会自动打印换行符； n ； print 默认添加换行符；
如下，假如我们直接使用 printf 这样操作，看下效果
awk '{printf $0}' alx.txt
明显来说，把所有内容都输出到同一行了，这时候，就需要使用 printf的格式化输出来控制；
awk '{printf "%sn", $0}' alx.txt
再看一个案例，使用 printf 将文本中的每一列添加前置输出
awk '{printf "第一列：%s 第二列：%s 第三列：%sn" ,$1,$2,$3}' alx.txt
六、awk模式pattern
上文了解到，awk的语法如下 ：
awk [option] ‘pattern[action]’ file …
而且我们了解到,awk是按行处理文本，以上都是关于 print 相关，接下来，聊聊pattern相关的内容；
在pattern中，有个比较常见的pattern，BEGIN和END；
BEGIN 模式是处理文本之前需要执行的动作；END模式是处理完成所有的行之后执行的操作；
awk 'BEGIN{print "小明在学linux"}'
或者下面这样
awk 'BEGIN{print "小明在学linux"} {print $0}END{print "处理结束"}' alx.txt
注意：BEGIN 和 END分别放到处理文本内容前后即可
awk如果不指定模式是按行处理，如果指定了模式，只有符合模式的才会被处理
awk常用模式
<小于=大于等于~匹配正则!~不匹配正则
1、打印前三行的文本内容
awk 'NR<=3{print $0}' alx.txt
2、匹配密码文本中含有 zcy 的行
awk '/^zcy/{print $0}' pwd.txt
3、格式化输出 /etc/passwd 的部分字段
awk -F ":" 'BEGIN{print"用户名ttt字段1tt 字段2tt 权限"} {printf "user:%-20s%-20s%-20s%-20sn", $1,$4,$5,$7}' pwd.txt
4、找出pwd文件中nologin的用户
awk '//sbin/nologin$/{print NR,$0}' pwd.txt
5、找出 下面这个区间的文本行
awk '/^daemon/,/^operator/{print NR,$0}' pwd.txt
相关推荐：《Linux视频教程》
以上就是linux awk命令怎么用的详细内容，更多请关注创想鸟其它相关文章！
版权声明：本文内容由互联网用户自发贡献，该文观点仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容， 请发送邮件至 chuangxiangniao@163.com 举报，一经查实，本站将立刻删除。
发布者：程序猿，转转请注明出处：https://www.chuangxiangniao.com/p/137089.html
微信扫一扫 
支付宝扫一扫 
