百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

awk命令详解

nanshan 2025-01-08 16:17 16 浏览 0 评论

awk 命令安装:


-bash/zsh: awk command not found #Debianapt-get install gawk #Ubuntuapt-get install gawk #Alpineapk add gawk #Arch Linuxpacman -S gawk #Kali Linuxapt-get install gawk #CentOSyum install gawk #Fedoradnf install gawk #OS Xbrew install awk #Raspbianapt-get install gawk #Dockerdocker run cmd.cat/awk awk

awk 命令说明:


awk 命令补充说明:


AWK 是另一种流行的流编辑器,类似于 SED。 awk 的基本功能是在文件中搜索包含一种或多种模式的行或其他文本单元。 当一行与其中一个模式匹配时,会对该行执行特殊操作。

有几种方法可以运行 awk。 如果程序很短,最简单的方法是在命令行上运行它:

awk PROGRAM inputfile(s)

如果必须对多个文件进行多次更改,可能定期对多个文件进行更改,则将 awk 命令放在脚本中会更容易。 这是这样读的:

awk -f PROGRAM-FILE inputfile(s)

awk 中最常用的程序是 print,我们很快就会看到。awk 中的打印命令从输入文件中输出选定的数据。变量 $1, $2, $3, ..., $N 保存输入行的第一个、第二个、第三个直到最后一个字段的值。 变量 $0(零)保存整行的值。

如上图:要打印大小 $2 和使用% $5,请使用 df -h | awk '{print $2,$5}'注意$2,$5:它们之间的 , 将用 空格 分隔输出。

$ df -h | awk '{print $2,$5}' -------------------Size Use%40G 25%7.8G 0%7.8G 0%7.8G 1%7.8G 0%1000G 12%1.6G 0%1.6G 0%

awk 命令语法:


awk [-F sepstring] [-v assignment]... program [argument...] awk [-F sepstring] -f progfile [-f progfile]... [-v assignment]...[argument...]

awk 命令选项:


-F sepstring                 Define the input field separator. This option shall be                 equivalent to: -v FS=sepstring                  except that if -F sepstring and -v FS=sepstring are                 both used, it is unspecified whether the FS assignment                 resulting from -F sepstring is processed in command                 line order or is processed after the last -v                 FS=sepstring.  See the description of the FS built-in                 variable, and how it is used, in the EXTENDED                 DESCRIPTION section. -f progfile                 Specify the pathname of the file progfile containing an                 awk program. A pathname of '-' shall denote the                 standard input. If multiple instances of this option                 are specified, the concatenation of the files specified                 as progfile in the order specified shall be the awk                 program. The awk program can alternatively be specified                 in the command line as a single argument. -v assignment                 The application shall ensure that the assignment                 argument is in the same form as an assignment operand.                 The specified variable assignment shall occur prior to                 executing the awk program, including the actions                 associated with BEGIN patterns (if any). Multiple                 occurrences of this option can be specified.

awk 命令实例:


awk 在空格分隔的文件中打印第五列(又名字段):

awk '{print $5}' filename

awk 在空格分隔的文件中打印包含“某物”的行的第二列:

awk '/something/ {print $2}' filename

awk 打印文件中每一行的最后一列,使用逗号(而不是空格)作为字段分隔符:

awk -F ',' '{print $NF}' filename

awk 对文件第一列中的值求和并打印总数:

awk '{s+=$1} END {print s}' filename

awk 对第一列中的值求和并漂亮地打印这些值,然后是总数:

awk '{s+=$1; print $1} END {print "--------"; print s}' filename

awk 从第一行开始每三行打印一次:

awk 'NR%3==1' filename

awk Formatting 格式化字段输出:

$ df -h | sort -rnk 5 | head -3 | awk '{ print "Partition " $6 "\t: " $5 " full!" }' Partition /mnt/sdb6    : 99% full!Partition /mnt/sdb5    : 97% full!Partition /home    : 89% full!

awk / gawk 字符串格式化:


Sequence

含义

\a

Bell character

\n

Newline character

\t

Tab

awk 打印命令和正则表达式,例如,从 /etc 目录列出以字母 ac 开头并以 .conf 结尾的文件并打印第 9 个字段:

$ ls -l /etc/ | awk '/\<(a|c).*\.conf$/ { print $9 }' adduser.confapg.confca-certificates.confcasper.confresolv.conf

awk 脚本方式,我们使用 BEGINEND,正则表达式配置到 test.awk 中,然后运行:

BEGIN { print "*** WARNING WARNING WARNING ***" }/\<[8|9][0-9]%/ { print "Partition " $6 "\t: " $5 " full!" }END { print "*** Give money for new disks URGENTLY! ***" }  $ df -h | awk -f test.awk  *** WARNING WARNING WARNING ***Partition /    : 89% full!Partition /mnt/sdb5    : 97% full!Partition /mnt/sdb6    : 99% full!Partition /home    : 89% full!*** Give money for new disks URGENTLY! ***

awk 的 RSORSFSOFSNRNF

RS:Record Separator,记录分隔符 ORS:Output Record Separate,输出当前记录分隔符 FS:Field Separator,字段分隔符 OFS:Out of Field Separator,输出字段分隔符 NR:Number of Records 当前行数 NF:Number of Fields 字段数量

假设 test.txt 文件有 100 行,awk 只取第 20 到第 30 行内容:

awk '{if(NR>=20 && NR<=30) print $1}' test.txt

相关推荐

0722-6.2.0-如何在RedHat7.2使用rpm安装CDH(无CM)

文档编写目的在前面的文档中,介绍了在有CM和无CM两种情况下使用rpm方式安装CDH5.10.0,本文档将介绍如何在无CM的情况下使用rpm方式安装CDH6.2.0,与之前安装C5进行对比。环境介绍:...

ARM64 平台基于 openEuler + iSula 环境部署 Kubernetes

为什么要在arm64平台上部署Kubernetes,而且还是鲲鹏920的架构。说来话长。。。此处省略5000字。介绍下系统信息;o架构:鲲鹏920(Kunpeng920)oOS:ope...

生产环境starrocks 3.1存算一体集群部署

集群规划FE:节点主要负责元数据管理、客户端连接管理、查询计划和查询调度。>3节点。BE:节点负责数据存储和SQL执行。>3节点。CN:无存储功能能的BE。环境准备CPU检查JDK...

在CentOS上添加swap虚拟内存并设置优先级

现如今很多云服务器都会自己配置好虚拟内存,当然也有很多没有配置虚拟内存的,虚拟内存可以让我们的低配服务器使用更多的内存,可以减少很多硬件成本,比如我们运行很多服务的时候,内存常常会满,当配置了虚拟内存...

国产深度(deepin)操作系统优化指南

1.升级内核随着deepin版本的更新,会自动升级系统内核,但是我们依旧可以通过命令行手动升级内核,以获取更好的性能和更多的硬件支持。具体操作:-添加PPAs使用以下命令添加PPAs:```...

postgresql-15.4 多节点主从(读写分离)

1、下载软件[root@TX-CN-PostgreSQL01-252software]#wgethttps://ftp.postgresql.org/pub/source/v15.4/postg...

Docker 容器 Java 服务内存与 GC 优化实施方案

一、设置Docker容器内存限制(生产环境建议)1.查看宿主机可用内存bashfree-h#示例输出(假设宿主机剩余16GB可用内存)#Mem:64G...

虚拟内存设置、解决linux内存不够问题

虚拟内存设置(解决linux内存不够情况)背景介绍  Memory指机器物理内存,读写速度低于CPU一个量级,但是高于磁盘不止一个量级。所以,程序和数据如果在内存的话,会有非常快的读写速度。但是,内存...

Elasticsearch性能调优(5):服务器配置选择

在选择elasticsearch服务器时,要尽可能地选择与当前业务量相匹配的服务器。如果服务器配置太低,则意味着需要更多的节点来满足需求,一个集群的节点太多时会增加集群管理的成本。如果服务器配置太高,...

Es如何落地

一、配置准备节点类型CPU内存硬盘网络机器数操作系统data节点16C64G2000G本地SSD所有es同一可用区3(ecs)Centos7master节点2C8G200G云SSD所有es同一可用区...

针对Linux内存管理知识学习总结

现在的服务器大部分都是运行在Linux上面的,所以,作为一个程序员有必要简单地了解一下系统是如何运行的。对于内存部分需要知道:地址映射内存管理的方式缺页异常先来看一些基本的知识,在进程看来,内存分为内...

MySQL进阶之性能优化

概述MySQL的性能优化,包括了服务器硬件优化、操作系统的优化、MySQL数据库配置优化、数据库表设计的优化、SQL语句优化等5个方面的优化。在进行优化之前,需要先掌握性能分析的思路和方法,找出问题,...

Linux Cgroups(Control Groups)原理

LinuxCgroups(ControlGroups)是内核提供的资源分配、限制和监控机制,通过层级化进程分组实现资源的精细化控制。以下从核心原理、操作示例和版本演进三方面详细分析:一、核心原理与...

linux 常用性能优化参数及理解

1.优化内核相关参数配置文件/etc/sysctl.conf配置方法直接将参数添加进文件每条一行.sysctl-a可以查看默认配置sysctl-p执行并检测是否有错误例如设置错了参数:[roo...

如何在 Linux 中使用 Sysctl 命令?

sysctl是一个用于配置和查询Linux内核参数的命令行工具。它通过与/proc/sys虚拟文件系统交互,允许用户在运行时动态修改内核参数。这些参数控制着系统的各种行为,包括网络设置、文件...

取消回复欢迎 发表评论: