一  
  
  
  
  
  
  
 、awk概述

AWK是一种处理文本文件的语言              ，是一个强大的文件分析工具              。

它是专门为文本处理设计的编程语言 
 
  
 
  
 
  
 
  
 
  
 
  
 
  ，也是行处理软件













，通常用于扫描
  
  
  
  
  
  
  
，过滤 
  
  
  
  
  
  
 ，统计汇总等工作 


 


 


 


 


 


 


 ，数据可以来自标准输入也可以是管道或文件 
 
  
 
  
 
  
 
  
 
  
 
  
 
  。

1 
  
  
  
  
  
  
 、awk工作原理

当读到第一行时
 
 
 
 
 
 
 
，匹配条件  
   
   
   
   
   
   
 ，然后执行指定动作 

 

 

 

 

 

 

 ，在接着读取第二行数据处理

 

 

 

 

 

 

 
，不会默认输出













。

如果没有定义匹配条件              ，则是默认匹配所有数据行 
 

 
 

 
 

 
 

 
 

 
 

 
 

 ，awk隐含循环














，条件匹配多少次                     ，动作就会执行多少次
  
  
  
  
  
  
  
。

逐行读取文本 
 
 
 
 
 
 
 
 
 
 
 
 
 
 ，默认以空格或tab键为分割符进行分割





















，将分割所得的各个字段              ，保存到内建变量中 
 
  
 
  
 
  
 
  
 
  
 
  
 
  ，并按模式或或条件执行编辑命令 
  
  
  
  
  
  
 。

与sed工作原理相比：

sed命令常用于一整行的处理 


 


 


 


 


 


 


 。而awk比较倾向于将一行分成多个 “ 字段   
  
  
  
  
  
  
 ” 然后再进行处理
 
 
 
 
 
 
 
。awk信息的读入也是逐行读取的













，执行结果可以通过print的功能将字段数据打印显示  
   
   
   
   
   
   
 。在使用awk命令的过程中
  
  
  
  
  
  
  
，可以使用逻辑操作符 

 

 

 

 

 

 

 。（&&“表示"与 
  
  
  
  
  
  
 ”


 


 


 


 


 


 


 
、“||表示"或


 


 


 


 


 


 


 
” 
 
 
 
 
 
 
、"!“表示非 
 
 
 
 
 
 
”;还可以进行简单的数学运算 
  
  
  
  
  
  
 ，如+  
   
   
   
   
   
   
  、一

 

 

 

 

 

 

 
、*
 

 

 

 

 

 

 
、/               、%
 

 
 

 
 

 
 

 
 

 
 

 
 

 
、^分别表示加













、减                      、乘
 
 
 
 
 
 
 
 
 
 
 
 
 
 
、除




















、取余和乘方

 

 

 

 

 

 

 
。）

二               、awk的格式

格式1: awk 【选项】 模式或条件{操作} 文件名 格式2: awk -f 脚本文件 文件名

1
 
  
 
  
 
  
 
  
 
  
 
  
 
  
、awk包含几个特殊的内建变量（可直接用）如下所示

内置变量 功能 NF 当前处理的行的字段个数（就是：有多少列） NR 当前处理的行的行号（就是：有多少行） FNR 读取文件的记录数（行号） 


 


 


 


 


 


 


 ，从1开始
 
 
 
 
 
 
 
，新的文件重新从1开始计数 $0 当前处理的行的整行内容（就是：表示一行的内容） $n 当前处理行的第n个字段（就是：第n列） FILENAME 被处理的文件名 FS 指定每行的字段分隔符  
   
   
   
   
   
   
 ，默认为空格或制表位（相当于选项 -F ） OFS 输出字段的分隔符 

 

 

 

 

 

 

 ，默认也是空格 RS 行分割符              。awk从文件上读取资料时

 

 

 

 

 

 

 
，将根据Rs的定义把资料切割成许多条记录              ，而awk一次仅读取一条记录 
 

 
 

 
 

 
 

 
 

 
 

 
 

 ，预设值是“\n“ ORS 输出分割符














，默认也是换行符

三













、内置变量演示

1  
  
  
  
  
  
  
 、【$n】进行演示

n为数字                     ，数字为及就表示第几列

案例1：结合print进行输出 
 
 
 
 
 
 
 
 
 
 
 
 
 
 ，默认分隔符 
 

 
 

 
 

 
 

 
 

 
 

 
 

 。

案例2：设定分割符号

案例3：输出时





















，显示列的空格

案例4：两列之间插入制表符

案例5：设置多个分割符

2 
  
  
  
  
  
  
 、【$0】的演示

$0表示整行

3


 


 


 


 


 


 


 
、【NF】(多少列) 和 【NR】(多少行)的演示

NR：表示该处理的行序号是多少 NF：表示该处理的行              ，有多少列

案例1：打印每一行的列数

案例2：显示行号

案例3：显示行号 
 
  
 
  
 
  
 
  
 
  
 
  
 
  ，并显示每一行的内容

案例4：打印第二行













，不加print也一样
  
  
  
  
  
  
  
，默认就是打印

案例5：打印第二行的第一列

案例6：打印最后一列

案例7：打印总行数

案例8：打印文件最后一行

案例9：加上文字描述行数和列数

4 
 
 
 
 
 
 
、面试题

案例1：查看本机的ip地址多少 
  
  
  
  
  
  
 ，截取出来

案例2：查看本机流量有多少字节

案例3：查看根分区的可用量

5  
   
   
   
   
   
   
  、BEGIN开始和END结尾

逐行执行开始之前执行什么任务 


 


 


 


 


 


 


 ，结束之后再执行什么任务
 
 
 
 
 
 
 
，用BEGIN

 

 

 

 

 

 

 
、END














。

BEGIN：一般用来做初始化操作  
   
   
   
   
   
   
 ，仅在读取数据记录之前执行一次 END：一般用来做汇总操作 

 

 

 

 

 

 

 ，仅在读取完数据记录之后执行一次

案例1：在打印之前定义字段分割符为冒号

案例2：OFS定义了输出时以什么分隔

 

 

 

 

 

 

 
，$1$2中间要用逗号分隔              ，因为逗号默认被映射为OFS变量 
 

 
 

 
 

 
 

 
 

 
 

 
 

 ，而这个变量默认是空格

案例2：可以看到当有多个文件时














，序号会分别标好每一个文件内容的行号                     ，不同文件会从头开始                     。（NR会连续在一起）

案例3：RS:指定以什么为换行符 
 
 
 
 
 
 
 
 
 
 
 
 
 
 ，这里指定是冒号





















，你指定的必须是原文里存在的字符

案例4：把多行合并成一行输出              ，输出的时候自定义以空格分隔每行 
 
  
 
  
 
  
 
  
 
  
 
  
 
  ，本来默认的是回车键

6
 

 

 

 

 

 

 
、模糊匹配

精确匹配： 可以将要匹配的内容加上双引号 
 
 
 
 
 
 
 
 
 
 
 
 
 
 。

用~表示包含













，用!~表示不包含

7               、关于数值与字符串的比较

加上逻辑运算： && ||

案例：打印1-200之间所有能被7整除并且包含数字7的整数数字

四
 

 
 

 
 

 
 

 
 

 
 

 
 

 
、总结

awk常用操作是提取转换文本文件内容
  
  
  
  
  
  
  
，awk功能十分强大 
  
  
  
  
  
  
 ，几乎其它文本处理命令能做的 


 


 


 


 


 


 


 ，awk都能做





















。

此处主要介绍awk的几种内置变量              。

$n：表示截取哪一列
 
 
 
 
 
 
 
，通常和print一起使用 $0：表示整行内容 NF：表示该行有多少列 NR：表示该行的行号 FNR：表示读取两个文件时  
   
   
   
   
   
   
 ，序号会分别从0开始标 FS：表示读取文件的分隔符（默认空格） OFS：表示输入的内容以什么为分割符（默认空格） RS：表示读取文件的以什么为换行符（默认\n） ORS：表示输出的内容以什么为换行符（默认\n） ~：表示包含 ！~：表示不包含