shell进阶awk命令编排字段使用详解

 更新时间:2023年09月25日 08:48:16   作者:bug生产者  
这篇文章主要为大家介绍了shell进阶awk命令编排字段使用详解,有需要的朋友可以借鉴参考下,希望能够有所帮助,祝大家多多进步,早日升职加薪

awk命令

awk是shell进阶的重要命令,可以用来编排字段

awk把输入流看做一串记录的集合,每条记录都可以进一步细分为字段,一个awk程序是一对以模式和大括号框起来的操作组合而成的,awk每次从文件中读取一条记录

awk [选项] '条件{动作} 条件{动作}' 文件
 -v 设置变量值

pattern {action} 如模式匹配,则执行操作
pattern {action}
# 打印第一个字段
awk 'print $1'
# 打印整行
awk 'print $0'
# 打印第2与第5个字段
awk 'print $2,$5'
# 打印非空行
awk 'NF  > 0 {print $0}'

在读取数据时,默认的分隔符是空格,可以使用-F来指定分隔符

#awk [-F 分隔符] '命令' input-file
# 分隔符默认是空格
# 例: 打印出root用户记录
awk -F: '$1=="root"{print $0}' /etc/passwd

在输出数据时,默认的分隔符是空格,可以使用-v来设置输出字段分隔符

# 默认情况下,-v 改变输出字段的分隔字符,这里必须设置OFS变量来改变输出字段分隔符
awk -F: -v 'OFS=**' '{print $1,$5}' /etc/passwd

标量变量

保存单一值的变量叫做标量变量,常用的有

  • FILENAME 当前输入文件的名称

FNR 当前输入文件的当前行号,当有多个输入文档时相当有用

FNR == 3   选定第三条记录

  • FS 字段分隔符,默认为空格

NF 当前记录的字段数

NF == 0    选定空记录
NF > 3     选定拥有三个字段以上的记录
NF < 5     选定第1到第4条记录

  • NR 输入数据流的当前行号
  • OFS 输出字段分隔字符,默认为空格
  • ORS 输出记录分隔字符,默认为\n
  • RS 输入记录分隔字符
  • $0 当前行的全部内容
  • $n 当前行的第n的字段的内容

自定义变量

可以使用-v来设置自定义变量

free | awk -v age="10" -v name="lily" '{print name,age}'
lily 10
lily 10
lily 10

BEGIN和END

BEIGIN

BEGIN导致动作指令仅在读取任何数据记录之前执行一次

awk 'BEGIN {print "OK"}'
OK

END

END导致动作指令仅在读取完所有数据记录后执行一次

free | awk 'END {print "共有"NR"行"}'
共有3行

条件判断

awk还支持if判断语句

if(判断条件){
动作指令1;
} else if(判断条件2){
动作指令2;
} else {
动作指令N;
}

free | awk '{if(NR==1){print $1}else if(NR==2){print $2}}'
total
8008932

循环语句

awk还支持循环,如for循环、while循环,且支持使用continue、break、exit来进行中断

for循环

for(表达式1;表达式2;表达式3) {
动作指令序列
}

awk 'BEGIN{ for (i=1;i<=4;i++) {print i}}'
1
2
3
4

while循环

while(条件判断){
动作指令序列;
}

awk 'BEGIN{ i=1; while(i<=4) {print i;i++}}'
1
2
3
4

命令行参数

awk通过内建变量ARGC(参数计数)和ARGV(参数值)让命令行参数可用

awk 'BEGIN {print ARGV[0]}'

输出 awk 

awk 'BEGIN {for (k=0;k<ARGC;k++) print "ARGV["k"]=["ARGV[k]"]"}' a b c
ARGV[0]=[awk]
ARGV[1]=[a]
ARGV[2]=[b]
ARGV[3]=[c]

举例

统计磁盘可用空间

df | grep -v tmpfs | awk '{sum+=$4} END{print "磁盘可用容量:"sum/1024/1024"G"}''

磁盘可用容量:1.01912G

统计nginx各ip访问次数

awk ' \
> {IP[$3]++} \
> END { \
> for (i in IP) {print i,IP[i]} \
> }' /var/log/nginx/access.log

以上就是shell进阶awk命令编排字段使用详解的详细内容,更多关于shell awk命令编排字段的资料请关注脚本之家其它相关文章!

相关文章

  • shell两个文件去重的多种姿势

    shell两个文件去重的多种姿势

    最近在利用shell帮公司优化挖掘关键词的流程,用shell替代了多个环节的操作,极大提高了工作效率。下面这篇文章就给大家分享了利用shell实现两个文件去重的多种姿势,有需要的朋友们可以参考借鉴,下面来一起看看吧。
    2016-12-12
  • Linux动态库函数的详解

    Linux动态库函数的详解

    这篇文章主要介绍了Linux动态库函数的详解的相关资料,希望通过本文能帮助到大家,让大家理解掌握这部分的内容,需要的朋友可以参考下
    2017-10-10
  • 脚本实现SSH登录邮件报警

    脚本实现SSH登录邮件报警

    自动化运维中,登录保护是一个很重要的环节这篇文章主要介绍如何给自己的服务器添加ssh登录邮件告警,需要的朋友可以参考下
    2015-07-07
  • Shell脚本实现监测文件变化的示例详解

    Shell脚本实现监测文件变化的示例详解

    这篇文章主要和大家分享一个Shell脚本,可以实现监测文件变化功能。文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下
    2022-06-06
  • Linux shell传递参数实现原理及代码实例

    Linux shell传递参数实现原理及代码实例

    这篇文章主要介绍了Linux shell传递参数实现原理及代码实例,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
    2020-08-08
  • Shell脚本获取本地网卡IP、mac地址、子网掩码、dns IP、外网IP

    Shell脚本获取本地网卡IP、mac地址、子网掩码、dns IP、外网IP

    这篇文章主要介绍了Shell脚本获取本地网卡IP、mac地址、子网掩码、dns IP、外网IP,本文直接给出实现代码,需要的朋友可以参考下
    2014-10-10
  • shell的条件测试,变量测试,表达式中的0和1,数值判断,字符串判断

    shell的条件测试,变量测试,表达式中的0和1,数值判断,字符串判断

    本文主要介绍了shell的条件测试,变量测试,表达式中的0和1,数值判断,字符串判断,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
    2024-01-01
  • 详解Linux  Shell 实现一个获取任意位数的随机密码的脚本

    详解Linux Shell 实现一个获取任意位数的随机密码的脚本

    这篇文章主要介绍了详解Linux Shell 实现一个获取任意位数的随机密码的脚本的相关资料,本文提供实现方法及实现代码,需要的朋友可以参考下
    2017-08-08
  • shell自定义函数及参数调用解析

    shell自定义函数及参数调用解析

    与其它的脚本语言一样,bash同样支持函数。本文为大家介绍在bash中定义与使用函数的方法,有需要的朋友可以参考下
    2013-02-02
  • Linux Shell脚本中如何获取命令运行的结果

    Linux Shell脚本中如何获取命令运行的结果

    脚本中常常要获取一些命令的执行结果,比如当前目录pwd、当前时间date等等,下面这篇文章主要给大家介绍了关于Linux Shell脚本中如何获取命令运行的结果,需要的朋友可以参考下
    2023-06-06

最新评论