awk简单应用】的更多相关文章

awk是一个强大的文本分析工具,相对于grep的查找,sed的编辑,awk在其对数据分析并生成报告时,显得尤为强大.简单来说awk就是把文件逐行的读入,以空格为默认分隔符将每行切片,切开的部分再进行各种分析处理. awk有3个不同版本: awk.nawk和gawk,未作特别说明,一般指gawk,gawk 是 AWK 的 GNU 版本. 1.域分割符 awk 在没有使用-F 指定分割符的时候.默认以空格为分割符. 域分割 $0代表文本内容全文显示 $1 代表分割第一个域 $2 代表分割第二个域 依…
cut:对内容进行列切割 -d 后面的是分割符,表示用什么符号来分割符来分割列,分隔符使用引号括起来: -f后面跟着要选择的字段列,从1开始,表示第一列,如果要多列,可以用逗号分隔 : -c参数后面跟着要选择的字符偏移,-b表示后面跟着要选择的字节偏移: 可以使用start-end表示一个区间,解决使用逗号的烦恼. 比如这个实例: ubuntu@ubuntu:~$ cat test.txt aaaaa;bbbbb;ccccc ddddddd;eeeeee fffff;gggggggg!iii;j…
先创建一个文件:vim hi 取第2个字段和第3个字段: awk '{print $2,$3}' hi     注意{}中的,逗号会在输出的时候转变为空格 加入字符说明: 显示整行: 指定字段分隔符:-F 内建变量:NF     NF:字段数量,  $NF代表最后一个字段 NR:行数 /regular expression/: 仅处理能够被此处的模式匹配到的行 取反:awk '!/^john/{print $2}' hi 上面的语句表示如果第三个字段大于等于500,则取第一和第三个字段 判断最后…
1 awk简介 awk是一种编程语言,用于在linux/unix下对文本和数据进行处理.数据可以来自标准输入.一个或多个文件,或其它命令的输出.它支持用户自定义函数和动态正则表达式等先进功能,是linux/unix下的一个强大编程工具.blabla一堆,好处多多. 2 awk写在前面的话 awk脚本要注意两个关键字BEGIN和END. BEGIN:放的是执行前的语句:END:这里面放的是处理完所有的行后要执行的语句 3 awk常用环境变量 记录---awk把每一个以换行符结束的行称为一个记录 域…
一.awk基本操作 awk指定多个分割符,分隔符中有:和空格,还有:和空格的组合,这个时候需要指定多个分隔符 -F'[ :]+',[ :]表示分隔符为:和空格,一个或者多个+号表示空格和:的组合也为一个分隔符 打印倒数第一列,以空格和:and空格 “:”的组合为分隔符 [root@VM_0_84_centos ~]# cat aaa |awk -F'[: ]+' '{print $NF}' number #打印倒数第二列,以空格和:and空格 “:”的组合为分隔符 [root@VM_0_84_c…
[root@python ~]# cat testcount.txt a 1.1.1.1b 2.2.2.2c 3.3.3.3a 1.1.1.1d 4.4.4.4e 5.5.5.5f 6.6.6.6 1.去重: awk '!a[$1]++ {print}' testcount.txt a 1.1.1.1b 2.2.2.2c 3.3.3.3d 4.4.4.4e 5.5.5.5f 6.6.6.6 2.统计第二列 awk '{a[$1]++} END{for (i in a) print a[i],i}…
find:查找 // .表示当前目录:   /表示根目录:  | 管道符:  xargs表示将前面的搜索接口作为参数传递到后面的命令中:grep 过滤 // xxxx表示文件名 1.查找指定文件名的文件 find . -name xxxx    // 区分大小写 find . -iname xxxx   // 不区分大小写 2.查找当前目录中文件名后缀为 .json的所有文件 find . -type f -name '*.json' 3.查找当前目录下所有文件夹 find . -type d…
一.grep简介: grep (缩写来自Globally search a Regular Expression and Print)是一种强大的文本搜索工具,它能使用正则表达式搜索文本,并把匹配的行打印出来.Unix的grep家族包括grep.egrep和fgrep 表达符集 ^ 锚定行的开始 如:'^grep'匹配所有以grep开头的行. $ 锚定行的结束 如:'grep$'匹配所有以grep结尾的行. . 匹配一个非换行符('\n')的字符如:'gr.p'匹配gr后接一个任意字符,然后是p…
1. 命令格式 gawk [OPTIONS] 'program' FILES.... program:'PATTERN{ACTION}' 一条awk命令中,PATTERN和ACTION,至少存在一个才可执行: 缺少PATTERN,则对输入行内容全部执行ACTION: 缺少ACTION,则所有匹配上PATTERN的输入行都会被输出: 在awk中使用分号";"来分割语句: 2. awk的执行过程 awk读取一行,进行模式匹配,匹配了就执行相应的动作,没有匹配就忽略,读取下一行,重复此动作.…
偷懒之人,必定会想方设法的走捷径.如果你想结束多个ID进程,有的人可能会说pkill 和killall.但是有时候不知道为啥 不生效啊 = =! 知道的可以告诉我.刚好最近在学awk 下面命令调用系统命令. 记录一下! ps -ef |grep awktest|awk '{ print "kill -9 "$2 | "/bin/bash" }…