awk介绍
awk 是一个强大的文本处理工具,它将文本逐行读入,并进行切片,默认以空白格为分割符,对单个切片进行分析,处理。
用法:
awk '{pattern + action}' {filenames}
尽管操作可能会很复杂,但语法总是这样,其中 pattern 表示 AWK 在数据中查找的内容,而 action 是在找到匹配内容时所执行的一系列命令。花括号({})不需要在程序中始终出现,但它们用于根据特定的模式对一系列指令进行分组。 pattern就是要表示的正则表达式,用斜杠括起来。
awk语言的最基本功能是在文件或者字符串中基于指定规则浏览和抽取信息,awk抽取信息后,才能进行其他文本操作。完整的awk脚本通常用来格式化文本文件中的信息。
通常,awk是以文件的一行为处理单位的。awk每接收文件的一行,然后执行相应的命令,来处理文本。
选项:
-F : 指定地段分割符:默认分割符为空白字符
如:[root@localhost@~]#awk '{print $2,$4}' /etc/fstab
print :显示第2段和第4段, 对个参数之间用,号分割
输出的可以是:字符串,数值,当前字段 变量 或 表达式
awk ‘{print "hello",$1,$2,6}’
变量:
内建变量:
FS 输入分割符就等于 -F --- awk -v FS=':' '{print $1,$2,$3}' = awk -F: '{print $1,$2,}'
OFS 输出分隔符 awk -v OFS=“:” ‘{print $1,$2.$3}’
也可以一起设定:awk -v FS=’:’ -v OFS=’:’ ‘{print $1,$2.$3}’ /etc/passwd
NF : 输出每一行统计的字段数
NR:行数,可以设定行号
FNR :文件中行数 各文件分别计数
FILENAME : 文件名 每行都会显示一次文件名 有多少行显示多少次文件名
ARGC: 命令行参数的个数
ARGV : 数组 保存命令行中的个参数
BEGIN:显示一次: awk ‘BEGIN{print }’
END{}:j仅在文本处理完成后执行一次
自定义变量: -v var=value
awk -v test='hello' 'BEGIN{print test}'
awk 'BEGIN{test="hello"; print test}'
printf 命令:格式化输出命令
awk '{printf ARGC}' /etc/fstab
注意 不会换行需要给出换行符\n
3FORMAT中需要分别为后面的每一个item指定一个格式化符号
格式化符号:
%c ;显示字符SACII码
%d %i ;显示十进制整数
%e,E 科学计数法数值显示
%f 显示浮点数
%s 显示字符串
%u 无符号整数
%% ;显示%自身
awk -F: '{printf "username:%s,uid:%d\n",$1,$3}' /etc/passwd
修饰符: #[.#] : 第一个数字控制显示的宽度,第二个表示小数点的
awk -F: '{printf "username:%15s, uid:%15d\n",$1,$3}' /etc/passwd 实现对齐 -15 表示左对齐
操作符:
算术操作符: + - * / ^ %
赋值操作符 : = += -= ++ --
比较操作符: < > <= >= != ==
逻辑操作符:&& || !
函数调用:name(参数,canshu2)
匹配条件:
/regular/ :仅处理能够被匹配到的行: awk ‘/^UUID/{print $1}’ /etc/fstab
relational:关系表达式结果为真才处理,真:结果为非0值
awk –F: ‘$3>=1000{print $1,$3}’ /etc/psswd
awk -F: ‘$NF==”/bin/bash” {print $1,$NF}’ /etc/passwd
line ranges :行范围 开始行 ,结束行
awk -F: ‘(NR>=2&&NR<=10){print $1}’ /etc/paswwd
1 if—else 语法
格式 if(条件) statement else statment
[root@localhost ~]# awk -F: '{if($3>100) print $1,$3}' /etc/passwd
uid 大于1000的显示为普通用户,否则显示root或系统用户
awk -F: '{if($3>=1000) {printf "connes user:%s id:%d\n", $1,$3} else {printf "root or sys:%s id:%d\n",$1,$3}}' /etc/passwd
$NF 表示最后一个字段 NF 是一行字段数
awk -F: '{if($NF == "/sbin/nologin") print $1}' /etc/passwd
]# df -h |awk -F'%' '/^\/dev/ {print $1}'
2 while 语句
while(条件) statement
使用场景;对一行中多个字段逐一处理时 或对数组中多个元素逐一处理
awk '/^[[:space:]]*kernel/ {print}' /etc/grub.conf
awk '/^[[:space:]]*kernel/{i=1; while(i<=NF) {print $i,length($i); i++}}' /etc/grub.conf
awk '/^[[:space:]]*kernel/{i=1; while(i<=NF) {if(length($i)>7) {print $i,length($i)}; i++}}' /etc/grub.conf
for 语句
for(export1;export2;export3) statement
]# awk '/^[[:space:]]*kernel/ {for(i=1;i<=NF;i++) {print $i,length($i)}}' /etc/grub.conf
遍历数组中元素: for(var in arry) statement
switch语句case
break 和continue 语句
next语句,提前结束直接进入下一行
[root@localhost ~]# awk -F: '{if($3%2!=0) next; print $1,$3}' /etc/passwd
数组: week[mon]=”monday” 关联数组
# awk 'BEGIN{week["mon"]="monday";week["tu"]="tusday";week["we"]="weekday";for(i in week) {print week[i]}}'
]# awk 'BEGIN{week["mon"]="monday";week["tu"]="tusday";week["we"]="weekday"; print week["mon"]}'
函数:
内置函数:
rand() :返回0和1之间任意数
length():返回指定字符串长度
sub(r,s,[t]) 以r模式来查找t字符串中匹配的内容,并将第一次出现替换为s多表达的内容
awk -F: ‘{print sub(o,O, $1)}’ /etc/passwd
自定义函数:
]# netstat -tan | awk '/^tcp\>/ {print $0}'
awk介绍的更多相关文章
- AWK 介绍
一.模式和动作 awk脚本是由模式和操作组成的:pattern {action} pattern与{action}两者是可选的.如果没有模式,则action应用到全部记录,如果没有action,则输出 ...
- Shell 学习—AWK介绍
Shell 学习—AWK = = = 安装awk root@kiki-desktop:~/shell# apt-get install gawk gawk-doc = = = awk 是一种程序语言. ...
- shell编程awk基础介绍
awk介绍 报告生成器,格式化文本输出 处理机制类似sed命令,自带循环处理 读入一行处理一行然后自动读取下一行再进行处理 sed命令换行的标识是固定的,只能是回车换行. awk里面的换行 ...
- AWK的介绍学习
第一节.awk的工作流程和基本用法 1.awk介绍 awk是一种报表生成器,就是对文件进行格式化处理的,这里的格式化不是文件系统的格式化,而是对文件内容进行各种"排版",进而格式化 ...
- 『忘了再学』Shell基础 — 27、AWK编程的介绍和基本使用
目录 1.AWK介绍 (1)AWK概述 (2)printf格式化输出 (3)printf命令说明 2.AWK的基本使用 (1)AWK命令说明 (2)AWK命令使用 1.AWK介绍 (1)AWK概述 A ...
- 【译】 AWK教程指南 1前言
前面的话: 这几天写了一个程序,在同一个目录里生成了很多文件,需要统计其中部分文件的总大小,发现经常用到的ls.du等命令都无济于事,我甚至都想到了最笨的方法,写一个脚本:mkdir一个新目录,把要统 ...
- 【译】 AWK教程指南
前面的话: 这几天写了一个程序,在同一个目录里生成了很多文件,需要统计其中部分文件的总大小,发现经常用到的ls.du等命令都无济于事,我甚至都想到了最笨的方法,写一个脚本:mkdir一个新目录,把要统 ...
- 正则表达式、find、grep、awk、sed
1.正则表达式 (1)正则表达式一般用来描述文本模式的特殊用法,由普通字符(例如字符a-z)以及特殊字符(称为元字符,如/.*.?等)组成. (2)基本元字符集及其含义 ^ :只 ...
- awk进阶整理
BEGIN{写在前言,我英语不好,有许多地方直接使用的谷歌翻译.为了能理清awk工具使用的思路,详情还要看awk说明书(man awk) 或者http://www.gnu.org/software/g ...
随机推荐
- sugarCrm翻译
Logic Hook hook配置信息和触发器定义在以下目录中 ./custom/Extension/modules/<module>/Ext/LogicHooks/<file> ...
- PHP超精简文章管理系统 Summer Article
2017年3月8日 21:18:43 星期三 git: https://git.oschina.net/myDcool/article.git 截图:
- scrapy 在迭代爬取时被拒 offsite 增加dont_filter=True
- 2)django-请求生命周期
1)下图是django请求生命周期 2)详细例子
- vi快速查找
用vim时,想高亮显示一个单词并查找的方发,将光标移动到所找单词. 1: shift + "*" 向下查找并高亮显示 2: shift + "#" 向上查找 ...
- MSChart的研究(转)
介绍MSChart的常用属性和事件 MSChart的元素组成 最常用的属性包括 ChartAreas:增加多个绘图区域,每个绘图区域包含独立的图表组.数据源,用于多个图表类型在一个绘图区不兼容时. A ...
- iOS -- Effective Objective-C 阅读笔记 (2)
1: 多用类型常量, 少用 #define 预处理指令 #define 预处理指令会把碰到的所有 指定名称 一律换位 定义的内容, 这样的话, 假设此指令在某个头文件中, 那么所有引入这个头文件的代码 ...
- Connection reset by [server_ip] port 22 (hexo d 部署博客出错)
问题 在使用 hexo d 部署博客和使用 Git/Github 进行 git push -u origin master 时遇到了以下问题: git -c diff.mnemonicprefix=f ...
- 修改MongoDB密码
修改MongoDB密码 禁用管理员(root)密码 1.找到配置文件mongod.conf,并进入 vim /etc/mongod.conf 2.禁用管理员(root)密码 找到: security: ...
- VUE开发请求本地数据的配置,旧版本dev-server.js,新版本webpack.dev.conf.js
VUE开发请求本地数据的配置,早期的vue-lic下面有dev-server.js和dev-client.js两文件,请求本地数据在dev-server.js里配置,最新的vue-webpack-te ...