一、awk基本概念
awk是一种数据处理与报告生成器，其名称取自它的三个创始人Al Aho、Peter Weinberger和Brian Kernighan的姓氏的首字母。awk与sed一起，被称为Linux或Unix系统上最强大的文本处理工具。
awk的工作方式类似于其他命令行实用程序，它读取输入文件，对包括模式匹配和动作的命令进行操作，并将其输出到标准输出（stdout）上。
awk有许多内置函数，包括字符串和数字处理函数、数组和数据结构、时间和日期处理函数等，这使得它成为处理大量文本数据的最佳工具之一。
二、awk命令的基本语法
awk命令的基本语法如下:
awk 'pattern {action}' file
语法中的pattern是一个模式，用于筛选数据的行。如果某行数据符合该模式，则执行对应的action。
action可以为任何一段awk代码，包括打印、赋值、计算等等。在action中可以使用awk提供的各种函数和运算符。
如果没有指定pattern，则所有的输入行都会执行相应的action。
如果没有指定file，则awk将读取标准输入。
三、awk常用命令示例
1. 打印文件中的所有行
如下示例代码将打印file文件中的所有行：
awk '{print}' file
该命令中没有指定pattern，因此所有的输入行都会执行打印操作。
2. 使用空格和制表符分割字段
awk默认以空格和制表符分割字段，下面的示例打印file文件中第一个字段：
awk '{print $1}' file
该命令中的$1表示第一个字段。
3. 根据模式匹配过滤数据
如下示例代码将打印file文件中包含“keyword”的行：
awk '/keyword/ {print}' file
该命令中使用了模式匹配，只有输入行中包含“keyword”的行才会执行打印操作。
4. 使用内置变量
awk提供了一些内置变量，用于控制其行为。下面是一些常用的内置变量：
- FS：输入行中字段的分隔符，默认为一个或多个空格或制表符。
- NF：输入行中字段的个数。
- NR：已经处理过的行数。
- $0：整个输入行。
下面的示例代码使用FS变量将第二个字段打印出来：
awk -F':' '{print $2}' file
该命令中-F':'使用冒号作为字段的分隔符，$2表示第二个字段。
5. 计算总和和平均值
下面的示例代码将计算file文件中第二个字段的总和和平均值：
awk '{sum+=$2} END {print "sum=" sum ", avg=" sum/NR}' file
该命令中sum+=$2表示将第二个字段的值累加到sum变量中。END表示只在文件处理完毕后执行。NR表示已经处理的行数，因此sum/NR计算出平均值。
四、总结
awk是一个非常强大的文本处理工具，它支持模式匹配、内置函数、计算和各种数据结构等多种功能。使用awk可以轻松地处理和筛选大量文本数据，是运维工程师必备的技能之一。
