博客
关于我
linux--shell Awk
阅读量:587 次
发布时间:2019-03-11

本文共 1247 字,大约阅读时间需要 4 分钟。

Awk

Awk是一种强大的文本处理语言,最初于1977年由Alfred Aho、Peter Weinberger和Brian Kernighan发明。它的名字是三位开发者姓氏的首字母缩写(Aho、Weinberger、Kernighan)。Awk主要用于Linux/Unix环境下的文本扫描和处理,能处理标准输入、文件和管道数据。尽管有许多Awk的不同版本,如awk、nawk、gawk、MKS awk等,但在Linux中最常用的有gawk和mawk。而Ubuntu等系统默认使用mawk,RHEL则使用gawk。

Awk的工作流程是逐行扫描文件,从第一行到最后一行。它会将每一行与给定的模式进行匹配,如果匹配成功,则执行指定的处理动作。此外,Awk支持两个特殊模式BEGIN和END,分别用于在数据处理之前和之后执行。

Awk的语法基础

Awk程序的基本结构包括模式和动作,格式为pattern {action}。默认情况下,如果不指定模式,Awk会匹配所有数据,默认的处理动作是print。

Awk的命令行选项包括:

-
-F fs:指定字段分隔符,默认为空格或制表符。 -
-v var=val:在处理动作之前设置变量。 -
-f program-file:使用 脚本文件 来指定处理指令。

Awk的常用操作指令

1. 读取记录并分割字段

awk '{print $1,$2,$3}':输出记录的第1、2、3个字段。
awk '{print $NF}':输出记录的最后一个字段。
awk -F:a '{print $NF}':更改分隔符为 colon(+:),然后输出最后一个字段。

2. 应用正则表达式匹配

awk '/^$/' filename:匹配空行并打印。
awk '/anaconda/' filename:匹配包含“anaconda”的行并打印。

3. 字段操作和内置变量

FS:字段分隔符。
OFS:输出字段分隔符,默认为空格。
ORS:输出记录分隔符,默认为换行符。
NR:输入流的记录编号。
NF:记录的字段个数。

4. gsub和sub函数

gsub:在字符串中替换正则表达式匹配的所有实例。
sub:替换第一个匹配项。

Awk的高级应用

1. 条件判断

if语法格式:
if(表达式) {动作},若表达式为真,执行后续动作。

2. 循环语句

Awk支持whiledo循环,以及for循环。

while循环:用于重复执行某个动作直到条件满足。
do循环:执行预先定义的动作后再检查条件。

3. 数组和函数

数组:可以使用
a[$key]表示数组,
for循环通过变量遍历数组元素。
函数:Awk支持内置函数如
rand(生成随机数)、
gsub
getline(读取文本行)。

4. 统计空白行数

awk '/^$/{count++}' filename:统计并打印空白行数。
awk '/^$/{print count++}' END:在批处理完成后打印总数。

转载地址:http://ipztz.baihongyu.com/

你可能感兴趣的文章
opencv&Python——多种边缘检测
查看>>
OpenCV-Python接口、cv和cv2的性能比较
查看>>
opencv5-图像混合
查看>>
opencv9-膨胀和腐蚀
查看>>
OpenCV与AI深度学习 | YOLO11介绍及五大任务推理演示(目标检测,图像分割,图像分类,姿态检测,带方向目标检测)
查看>>
OpenCV与AI深度学习 | 使用Python和OpenCV实现火焰检测(附源码)
查看>>
OpenCV与AI深度学习 | 使用YOLO11实现区域内目标跟踪
查看>>
OpenCV与AI深度学习 | 使用YOLOv8做目标检测、实例分割和图像分类(包含实例操作代码)
查看>>
OpenCV与AI深度学习 | 基于PyTorch实现Faster RCNN目标检测
查看>>
OpenCV与AI深度学习 | 基于PyTorch语义分割实现洪水识别(数据集 + 源码)
查看>>
OpenCV与AI深度学习 | 基于YOLOv8的停车对齐检测
查看>>
OpenCV与AI深度学习 | 基于机器视觉的磁瓦表面缺陷检测方案
查看>>
Opencv中KNN背景分割器
查看>>
OpenCV中基于已知相机方向的透视变形
查看>>
opencv保存图片路径包含中文乱码解决方案
查看>>
opencv图像分割2-GMM
查看>>
OpenCV(1)读写图像
查看>>
OpenCV:概念、历史、应用场景示例、核心模块、安装配置
查看>>
Openlayers图文版实战,vue项目从0到1做基础配置
查看>>
Openlayers高级交互(10/20):绘制矩形,截取对应部分的地图并保存
查看>>