关于awk:超有用的-Linux-Unix-awk-命令示例

awk 是一种脚本语言，用于解决或剖析文本文件。或者咱们能够说，awk 命令次要用于依据列或字段或一组列对数据进行分组，它次要用于以有用的形式报告数据，它还应用 Begin 和 End 块来解决数据。

awk 名声在外，然而很少有人晓得它的违心是什么，awk 代表“Aho, Weinberger, and Kernighan”，又见伯格系列，如果有一天中国人的工具用人名来命名会是啥样子？

根本语法

# awk‘pattern {action}’input-file > output-file

咱们先创立一个蕴含以下数据的输出文件

$ cat  awk_file
Name,Marks,Max Marks
Ram,200,1000
Shyam,500,1000
Ghyansham,1000
Abharam,800,1000
Hari,600,1000
Ram,400,1000

(1) 打印所有行

默认状况下，awk 打印文件的所有行，示例如下

$ awk '{print;}' awk_file
Name,Marks,Max Marks
Ram,200,1000
Shyam,500,1000
Ghyansham,1000
Abharam,800,1000
Hari,600,1000
Ram,400,1000

备注: 在 awk 命令中 {print;} 用于打印所有字段及其值。

(2) 只打印特定的字段

在 awk 命令中，咱们应用 $ (美元) 符号后跟字段号来打印字段值。

咱们只打印字段 2 和字段 3，应用选项 -F，指定逗号为字段分隔符。

$ awk -F "," '{print $2, $3;}' awk_file
Marks Max Marks
200 1000
500 1000
1000
800 1000
600 1000
400 1000

(3) 打印与模式匹配的行

打印蕴含单词 Hari 或 Ram 的行，示例如下

$ awk '/Hari|Ram/' awk_file
Ram,200,1000
Hari,600,1000
Ram,400,1000

(4) 查找第一列惟一值

要从第一列中打印惟一的值，运行如下 awk 命令

$ awk -F, '{a[$1];}END{for (i in a)print i;}' awk_file
Abharam
Hari
Name
Ghyansham
Ram
Shyam

(5) 特定列中数据项的和

在 awk 命令中，也能够依据搜寻执行一些算术操作，语法如下所示

$ awk -F,‘$1==”Item1″{x+=$2;}END{print x}’awk_file

在上面的例子中，咱们搜寻 Ram，而后累加所对应的值。

$ awk -F, '$1=="Ram"{x+=$2;}END{print x}' awk_file
600

(6) 求一列中所有数字的总数

在 awk 命令中，咱们还能够计算某一列中所有数字的和。在上面的例子中，咱们正在计算第 2 列和第 3 列的所有数字的和。

$ awk -F"," '{x+=$2}END{print x}' awk_file
3500
$ awk -F"," '{x+=$3}END{print x}' awk_file
5000

(7) 分组求和

实现相似 SQL 中的按某个字段分组求和，示例如下：

$ awk -F, '{a[$1]+=$2;}END{for(i in a)print i", "a[i];}' awk_file
Abharam, 800
Hari, 600
Name, 0
Ghyansham, 1000
Ram, 600
Shyam, 500

(8) 计算特定列的总和，并将其附加到文件的开端

awk 命令先对一个列求和，而后附加到文件开端，示例如下

$ awk -F"," '{x+=$2;y+=$3;print}END{print"Total,"x,y}' awk_file
Name,Marks,Max Marks
Ram,200,1000
Shyam,500,1000
Ghyansham,1000
Abharam,800,1000
Hari,600,1000
Ram,400,1000
Total,3500 5000

(9) 分组计数

实现相似 SQL 中的按某个字段分组计数，示例如下：

$ awk -F, '{a[$1]++;}END{for (i in a)print i, a[i];}' awk_file
Abharam 1
Hari 1
Name 1
Ghyansham 1
Ram 2
Shyam 1

(10) 打印分组的第一个记录

打印每个分组的第一个记录，示例如下

$ awk -F, '!a[$1]++' awk_file
Name,Marks,Max Marks
Ram,200,1000
Shyam,500,1000
Ghyansham,1000
Abharam,800,1000
Hari,600,1000

AWK 块构造

根本语法

$ awk 'BEGIN{awk initializing code}{actual AWK code}' File-Name

咱们先创立一个具备以下内容的数据文件

(11) 自定义表头打印

$ awk 'BEGIN{print"Names\ttotal\tPPT\tDoc\txls"}{printf"%-s\t%d\t%d\t%d\t%d\n", $1,$2,$3,$4,$5}' datafile

(12) 批改文件分隔符

示例文件中咱们应用 SPACE 做分隔符，咱们将 SPACE 批改为“|”，示例如下

$ awk 'BEGIN{OFS="|"}{print $1,$2,$3,$4,$5}' datafile

我的开源我的项目

• course-tencent-cloud（酷瓜云课堂 – gitee 仓库）
• course-tencent-cloud（酷瓜云课堂 – github 仓库）