Linux基础第六课——grep|awk|sort|uniq
管道符 |
前面的输出作为后面的输入
grep 可以理解为正则表达式
grep [参数] 文件名
-c 打印符合要求的行数
-v 打印不符合要求的行
-n 在输出符合要求的行的同时连同行号一起输出
-i 忽略大小写
[0-9]
^
grep -c 'root' /etc/passwd
grep -nv 'root' /etc/passwd
grep '[0-9]' 文件名
grep '^#' -v test.py
yhq@yhq-virtual-machine:~$ grep 'r..o' /etc/passwd
systemd-resolve:x:102:104:systemd Resolver,,,:/run/systemd/resolve:/bin/false
kernoops:x:116:65534:Kernel Oops Tracking Daemon,,,:/:/bin/false
grep 'o{2}' /etc/passwd #匹配出现2次 o 的
wc 文件内容的统计
-l 统计你有多少行
-w 统计有多少个单词
yhq@yhq-virtual-machine:~$ cat /etc/passwd | wc -l #统计有多少个用户
46
awk 流式编辑器 针对文档的行去操作 一行一行的去执行
yhq@yhq-virtual-machine:~$ head -n 2 /etc/passwd | awk -F ':' '{print $1 $7}'
root/bin/bash
daemon/usr/sbin/nologin
-F 指定分隔符
$0 代表所有的列
$1 代表 第一列
yhq@yhq-virtual-machine:~$ head -n 2 /etc/passwd | awk -F ':' '{print $1"~"$7}' 指定字符串连接符 一定要双引号
root~/bin/bash
daemon~/usr/sbin/nologi
awk /root/ /etc/passwd #匹配root
awk -F ':' '$1 ~/root/' /etc/passwd #匹配第一列式root 的 那一行
awk -F ':' '$3==0' /etc/passwd #匹配第三列等于0的哪一行
awk -F ':' '$7!="/usr/sbin/nologin"' /etc/passwd
awk -F ':' '$3 < $4' /etc/passwd
awk -F ':' '$3 > 100 || $7 == "/usr/sbin/nologin"' /etc/passwd
awk -F ':' '$3 > 5 && $3 < 7' /etc/passwd
awk -F ":" '{(total=total+$3)};END{print total}' /etc/passwd #对所有行第三列求和
head -n 3 /etc/passwd | awk -F ':' '$1 == "root"'
uniq unique 删除重复的行 跟sort 命令 组合使用
sort -n -t ":" -k 1 | uniq -c
-c 在每行前面加上出现的次数
-d 只输出重复的行 多行只输出一行
-D 只输出重复的行 多行有几行输出几行
-i 忽略大小写
yhq@yhq-virtual-machine:~$ sort test.txt | uniq -c
1 apple
2 banana
1 caomei
1 huaguang
1 juhua
1 orange
yhq@yhq-virtual-machine:~$ sort test.txt | uniq -d
banana
yhq@yhq-virtual-machine:~$ sort test.txt | uniq -D
banana
banana
sort 排序 默认按照首字母排序
-n 按照数值排序
-t 指定分割符
-k 指定第几列
-r 逆向排序
cat /etc/passwd | sort -n -t ":" -k 3 -r 按照 :分割符 指定第三列 纯数值排序 逆向排序
面试题 : 查找你最常使用的10条命令
history |awk '{print $2}'| sort |uniq -c|sort -n -k 1 -r|head -n 10
Linux基础第六课——grep|awk|sort|uniq的更多相关文章
- [linux] grep awk sort uniq学习
grep的-A-B-选项详解grep能找出带有关键字的行,但是工作中有时需要找出该行前后的行,下面是解释1. grep -A1 keyword filename找出filename中带有keyword ...
- Linux基础之基本命令cat less more sort uniq alias 命令行 bash简单描述(三)
获取Linux当前最新的内核版本号经常关注www.kernel.org 目录管理:ls cd pwd mkdir rmdir tree 文件管理:touch stat file rm cp mv na ...
- 线上问题debug过程(cat,grep,tr,awk,sort,uniq,comm等工具的综合使用)
问题:发现线上到货单的数量,小于实际到货的数量. 怀疑一些隐藏的条件,将部分唯一码进行了过滤,导致数量变少. 开展了如下的跟踪流程: 1.找到其中一个明细的唯一码 grep 6180e-4b09f p ...
- linux awk,sort,uniq,wc,cut命令详解
1.awk awk是行处理器: 相比较屏幕处理的优点,在处理庞大文件时不会出现内存溢出或是处理缓慢的问题,通常用来格式化文本信息 $ 表示当前行 $ 表示第一列 NF 表示一共有多少列 $NF 表示最 ...
- Linux基础之-正则表达式(grep,sed,awk)
一. 正则表达式 正则表达式,又称规则表达式.(英语:Regular Expression,在代码中常简写为regex.regexp或RE),计算机科学的一个概念.正则表达式是对字符串操作的一种逻辑公 ...
- 【Linux】linux中文本操作利器grep,awk,sed
grep命令 grep(global search regular expression)是一种强大的文本搜索工具,它可以使用正则表达式搜索文本,并把匹配的行打印出来.平时搜索文本中内容的时候是非常方 ...
- 【Linux】日志分析工具grep sed sort
遇到一个问题,在查询日志时发现,服务器上打印的文件有很多个,每个都存储了一部分日志, 需要将日志按照时间排序,并显示所有日志. 原命令: grep -h searchContent */*log 搜 ...
- Linux基础第四课——文件操作
文件的创建 touch sudo touch 文件1 文件2 文件3 #支持批量创建文件 sudo rm -f 文件1 文件2 文件3 #支持批量创建 也支持批量删除 echo '谁动谁输,对不起我输 ...
- linux基础-第六单元 用户、群组和权限
用户及passwd文件 /etc/passwd文件的功能 /etc/passwd文件每个字段的具体含义 shadow文件 /etc/shadow文件的功能 /etc/shadow文件每个字段的具体含义 ...
随机推荐
- MultipartFile 多文件上传的应用
公司的项目很多地方要用到文件上传,以前的上传主要是用apache的fileupload ,使用的感受并不太好.今天试了试spring的MultipartFile,感觉还不错,封装的比较简洁. 当然,中 ...
- JavaWeb学习 (七)————HttpServletResponse对象(一)
一.HttpServletResponse对象介绍
- JavaWeb学习 (四)————Http协议
一.什么是HTTP协议 HTTP是hypertext transfer protocol(超文本传输协议)的简写,它是TCP/IP协议的一个应用层协议,用于定义WEB浏览器与WEB服务器之间交换数据的 ...
- 【学习笔记】JS经典异步操作,从闭包到async/await
参考文献:王仕军——知乎专栏前端周刊 感谢作者的热心总结,本文在理解的基础上,根据自己能力水平作了一点小小的修改,在加深自己印象的同时也希望能和各位共同进步... 1. 异步与for循环 抛出一个问题 ...
- MySQL常用的备份方式与备份工具简介
一.MySQL备份方式与备份类型 1.备份的必要性 再生产环境中,为了防止硬件故障.软件故障.自然灾害.误操作等各种原因导致的数据库数据丢失后能恢复到事故之前的状态,我们需要对数据库进行备份和恢复操作 ...
- Ado.net和EF的区别
ado.net EF作为微软的一个ORM框架,通过实体.关系型数据库表之间的映射,使开发人员可以通过操作表实体而间接的操作数据库,大大的提高了开发效率.这样一来,.net平台下,我们与底层数据库的交互 ...
- T-SQL:探究UNOIN,INTERSECT,EXCEPT集合运算符(十一)
1.UNOIN运算符 unoin合并了两个输入查询结果 并消除重复项 简单点说 就是输出并集 SELECT country, region, city FROM HR.Employees UNI ...
- Java基础——Oracle(四)
一.Sql * plus 常用命令 1.关于登录,连接的几个命令 1) conn[nect] //例 conn system/manager 用法 conn 用户名/密码 @网络服务名 (as sy ...
- 【常用配置】Spring框架web.xml通用配置
<web-app xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns="http://java. ...
- Python 练习:九九乘法表
num = 1 while num <= 9: tmp = 1 while tmp <= num: print(tmp, "*", num, "=" ...