Linux Shell三剑客之awk,功能强大的文本处理工具

awk命令初学时没有主要思路,不清楚具体功能,很容易沉迷在指令参数的海洋里,而且,awk还支持循环、判断,相当于学习一门小型编程语言,学习难度比较高 。
对于大多数人来说,理解能力都差不多,按照本文案例流程,在自己的linux上敲一遍,和结果对比,检查是否一致,就很容易理解了 。

Linux Shell三剑客之awk,功能强大的文本处理工具

文章插图
用手学Linux
不求面面俱到,只求初步掌握,熟练后再搭配其他指令灵活运用 。
awk简介
awk是Linux Shell中一种非常强大的文本处理工具,数据可以来自标准输入或者管道;
awk不仅仅是一个命令,更是一门编程语言,支持选择结构、循环结构、以及丰富的逻辑运算符,便于进行复杂的文本处理;
Linux Shell三剑客之awk,功能强大的文本处理工具

文章插图
 
awk按照行处理文本,逐行扫描,默认从第一行到最后一行,找到匹配到特定行,并进行相关操作;
awk分别代表其作者姓氏的第一个字母 。因为它的作者是三个人,分别是Alfred Aho、Brian Kernighan、Peter Weinberger 。
语法格式:
awk 选项 'commands' 文件名常用选项:-F 定义字段分割符号,默认的分隔符是空格-v 定义变量并赋值
Linux Shell三剑客之awk,功能强大的文本处理工具

文章插图
 
-F: 是以:将源文件分隔
/root/匹配源文件中包括root的行,打印出文件名,如果不进行匹配,则源文件有多少行就打印出多少行文件名
$0打印出匹配到行的全部内容
awk内置变量
变量
变量说明
$0
当前处理行的所有记录
1,1,2,3...3...n
文件中每行以间隔符号分割的不同字段
NF
当前记录的字段数(列数)
$NF
最后一列
NR
行号
FS
定义间隔符
OFS
定义输出字段分隔符,默认空格
RS
输入记录分割符,默认换行
ORS
输出记录分割符,默认换行
FILENAME
当前输入的文件名
Linux Shell三剑客之awk,功能强大的文本处理工具

文章插图
 
打印列数、最后一列、第1列、第2列、倒数第二列 。
Linux Shell三剑客之awk,功能强大的文本处理工具

文章插图
 
打印第1行到第5行 。
Linux Shell三剑客之awk,功能强大的文本处理工具

文章插图
 
用分号;分隔开两部分匹配规则,可以理解为或的关系,前面是匹配1-5行,后面是匹配以root开头的行,是前3行 。一共输出8行 。
格式化输入printf
Linux Shell三剑客之awk,功能强大的文本处理工具

文章插图
 
%s字符串类型占位符,默认右对齐,前面加负号-左对齐 。
awk中BEGIN...END使用
BEGIN:表示在程序开始前执行
END:表示所有文件处理完后执行
用法:'BEGIN{开始处理之前};{处理中};END{处理结束后}'
Linux Shell三剑客之awk,功能强大的文本处理工具

文章插图
 
awk -F: 'BEGIN{print "NAMEtDIRtSHELLn***************************************"}{printf "%-10s %-10s %-10sn",$1,$(NF-1),$NF}END{print "****************************************"}' input.txt间隔符
Linux Shell三剑客之awk,功能强大的文本处理工具

文章插图
 
BEGIN{FS=":"}相当于使用选项-F:


推荐阅读