Linux文本工具-cat-cut-paste;文本分析-sort-wc-uniq
1.1 查看文本文件内容 cat
1.1.1 cat可以查看文本内容
cat [OPTION]... [FILE]... 常见选项 -E: 显示行结束符$
-A: 显示所有控制符
-n: 对显示出的每一行进行编号
-b: 非空行编号
-s: 压缩连续的空行成一行
1.1.2 nl
显示行号,相当于cat -b
[10:00:37 root@centos8 ~]#nl /etc/fstab 1 #
2 # /etc/fstab
3 # Created by anaconda on Tue Apr 5 08:42:34 2022
4 #
5 # Accessible filesystems, by reference, are maintained under '/dev/disk/'.
6 # See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info.
7 #
8 # After editing this file, run 'systemctl daemon-reload' to update systemd
9 # units generated from this file.
10 #
11 UUID=7a405199-a904-4290-89a3-72992b4ad489 / xfs defaults 0 0
12 UUID=6c58d4aa-0c80-4e0b-b372-0a2187033d23 /boot ext4 defaults 1 2
13 UUID=2dd6f870-9df8-47ec-a4fc-b8a01878f4e0 /data xfs defaults 0 0
14 UUID=27f69466-124d-4124-aab8-85f247d76d57 none swap defaults 0 0
[10:00:46 root@centos8 ~]#cat -b /etc/fstab 1 #
2 # /etc/fstab
3 # Created by anaconda on Tue Apr 5 08:42:34 2022
4 #
5 # Accessible filesystems, by reference, are maintained under '/dev/disk/'.
6 # See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info.
7 #
8 # After editing this file, run 'systemctl daemon-reload' to update systemd
9 # units generated from this file.
10 #
11 UUID=7a405199-a904-4290-89a3-72992b4ad489 / xfs defaults 0 0
12 UUID=6c58d4aa-0c80-4e0b-b372-0a2187033d23 /boot ext4 defaults 1 2
13 UUID=2dd6f870-9df8-47ec-a4fc-b8a01878f4e0 /data xfs defaults 0 0
14 UUID=27f69466-124d-4124-aab8-85f247d76d57 none swap defaults 0 0
[10:01:14 root@centos8 ~]#
1.1.3 tac
逆向显示文本内容
[10:03:11 root@centos8 ~]#nl /etc/fstab|tac
14 UUID=27f69466-124d-4124-aab8-85f247d76d57 none swap defaults 0 0
13 UUID=2dd6f870-9df8-47ec-a4fc-b8a01878f4e0 /data xfs defaults 0 0
12 UUID=6c58d4aa-0c80-4e0b-b372-0a2187033d23 /boot ext4 defaults 1 2
11 UUID=7a405199-a904-4290-89a3-72992b4ad489 / xfs defaults 0 0
10 #
9 # units generated from this file.
8 # After editing this file, run 'systemctl daemon-reload' to update systemd
7 #
6 # See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info.
5 # Accessible filesystems, by reference, are maintained under '/dev/disk/'.
4 #
3 # Created by anaconda on Tue Apr 5 08:42:34 2022
2 # /etc/fstab
1 # [10:03:56 root@centos8 ~]#
1.1.4 rev
将同一行的内容逆向显示
[10:06:10 root@centos8 /data]#cat f1.txt
1 2 3 4 5 6 7 a b c d e f g
[10:06:22 root@centos8 /data]#cat f1.txt |rev
7 6 5 4 3 2 1 g f e d c b a
1.2 按列抽取文本cut
cut 命令可以提取文本文件或STDIN数据的指定列
格式
cut [OPTION]... [FILE]... 常用选项 -d DELIMITER: 指明分隔符,默认tab -f FILEDS:
#: 第#个字段,例如:3
#,#[,#]:离散的多个字段,例如:1,3,6
#-#:连续的多个字段, 例如:1-6
混合使用:1-3,7 -c 按字符切割 --output-delimiter=STRING指定输出分隔符
示例:
passwd文件取出第一列用户名
[10:11:47 root@centos8 /data]#cut -d":" -f1 /etc/passwd
root
bin
daemon
adm
lp
sync
shutdown
halt
operator
games
ftp
nobody
dbus
systemd-coredump
systemd-resolve
tss
polkitd
geoclue
[10:17:11 root@centos8 /data]#ifconfig | head -n2| tail -n1 |tr -s " "|cut -d" " -f3
192.168.1.85
[10:17:39 root@centos8 /data]#
1.3 合并多个文件paste
paste合并多个问价你同行号的列到一行
格式
paste [OPTION]... [FILE]... 常用选项 -d #分隔符:指定分隔符,默认用TAB
-s #所有行合成一行显示
示例:
[10:28:27 root@centos8 /data]#paste f1.txt
1 2 3 4 5 6 7 a b c d e f g
[10:28:34 root@centos8 /data]#paste -s f1.txt
1 2 3 4 5 6 7 a b c d e f g
[10:28:43 root@centos8 /data]#
[10:33:32 root@centos8 /data]#paste f1.txt seq.log
1 2 3 4 5 6 7 1
2
a b c d e f g 3
4
5
6
7
8
9
10
[10:33:55 root@centos8 /data]#paste -d";" f1.txt seq.log
1 2 3 4 5 6 7 ;1
;2
a b c d e f g;3
;4
;5
;6
;7
;8
;9
;10
2.1分析文本的工具
2.1.1 wc
wc命令可用于统计文件的行总数,单词总数,字节总数和字符总数
可以对文件或STDIN中的数据统计
常用选项
-l 只计数行数
-w 只计数单词总数
-c 只计数字节总数
-m 只计数字符总数
-L 显示文件中最长行的长度
示例
[10:34:04 root@centos8 /data]#wc /etc/fstab
15 78 709 /etc/fstab
行数 单词数 字节数
2.1.2 sort
sort:文本排序;把整理过的文本显示在STDOUT,不改变原始文件
格式:
sort [options] file(s) 常用选项 -r 执行反方向(由上至下)整理
-R 随机排序
-n 执行按数字大小整理
-h 人类可读排序,如: 2K 1G
-f 选项忽略(fold)字符串中的字符大小写
-u 选项(独特,unique),合并重复项,即去重
-t c 选项使用c做为字段界定符
-k # 选项按照使用c字符分隔的 # 列来整理能够使用多次
默认是把相同的字符排序在一起 [10:48:15 root@centos8 /data]#cat seq.log
1
2
3
4
5
6
7
8
9
1
10
11
2
12
8
13
9
14
15
[10:48:21 root@centos8 /data]#cat seq.log |sort
1
1
10
11
12
13
14
15
2
2
3
4
5
6
7
8
8
9
9
[10:49:44 root@centos8 /data]#cat seq.log |sort -u
1
10
11
12
13
14
15
2
3
4
5
6
7
8
9
2.1.3 uniq
uniq命令从输入中删除前后相接的重复的行
格式:
uniq [OPTION]... [FILE]... 常见选项 -c: 显示每行重复出现的次数
-d: 仅显示重复过的行
-u: 仅显示不曾重复的行 uniq常和sort 命令一起配合使用:
示例:
[10:50:10 root@centos8 /data]#cat seq.log |sort | uniq -c
2 1
1 10
1 11
1 12
1 13
1 14
1 15
2 2
1 3
1 4
1 5
1 6
1 7
2 8
2 9
作业练习
6、统计出/etc/passwd文件中其默认shell为非/sbin/nologin的用户个数,并将用户都显示出来
7、查出用户UID最大值的用户名、UID及shell类型
练习脚本写法
[14:48:51 root@centos8 /data/bashs]#cat user.sh
#!/bin/bash
cat /etc/passwd |cut -d":" -f3|sort -nr|head -1 > /dev/null
maxUID=`grep 65534 /etc/passwd | cut -d":" -f1,3,7`
echo "UID最大值的用户:$maxUID"
[14:52:53 root@centos8 /data/bashs]#bash user.sh
UID最大值的用户:nobody:65534:/sbin/nologin
8、统计当前连接本机的每个远程主机IP的连接数,并按从大到小排序
Linux文本工具-cat-cut-paste;文本分析-sort-wc-uniq的更多相关文章
- centos shell基础 alias 变量单引号 双引号 history 错误重定向 2>&1 jobs 环境变量 .bash_history source配置文件 nohup & 后台运行 cut,sort,wc ,uniq ,tee ,tr ,split, paste cat> 2.txt <<EOF 通配符 glob模式 发邮件命令mail 2015-4-8 第十二节课
centos shell基础知识 alias 变量单引号 双引号 history 错误重定向 2>&1 jobs 环境变量 .bash_history source配置文件 ...
- Linux小工具的应用,grep,sort,wc,cut
小工具的使用: 1.管道(|):连接多个命令的工具,进程之间通讯的一种方式 用法:命令1 | 命令2 | 命令3....2.grep工具:行过滤,打印出的结果一行一行的 用法:grep options ...
- Linux基础篇,文本数据的比较与排序:sort、uniq、comm、diff
一.sort sort命令用于将文本文件内容以行排序 sort [选项参数] [-o<输出文件>] [-t<分隔字符>] [+<起始栏位> -<结束栏位> ...
- Linux性能测试工具-UnixBench--安装以及结果分析
参考链接:http://blog.csdn.net/gatieme/article/details/50912910 依赖包安装: yum install -y SDL-devel mesa ...
- 转-Shell笔记——命令:Sort,uniq,join,cut,paste,split
转自:http://blog.csdn.net/wklken/article/details/6562098 Sort,uniq,join,cut,paste,split 命令—— Sort Sort ...
- linux shell 脚本攻略学习8---md5校验,sort排序,uniq命令详解
一.校验与核实 目前最为出名的校验技术是md5sum和sha1sum,它们对文件内容使用相应的算法来生成校验和. 举例: amosli@amosli-pc:~/learn$ md5sum text.t ...
- Linux Shell 文本处理工具集锦--Awk―sed―cut(row-based, column-based),find、grep、xargs、sort、uniq、tr、cut、paste、wc
本文将介绍Linux下使用Shell处理文本时最常用的工具:find.grep.xargs.sort.uniq.tr.cut.paste.wc.sed.awk:提供的例子和参数都是最常用和最为实用的: ...
- 文本处理工具(cut,sort,tr,grep等)
命令目录,查看某一个命令可点击直接跳转: 文件查看 cat tac rev more less 按行截取 head tail 转化内容 tr 按列操作 cut paste 分析文本 wc sort u ...
- 详解Linux中的cat文本输出命令用法
作系统 > LINUX > 详解Linux中的cat文本输出命令用法 Linux命令手册 发布时间:2016-01-14 14:14:35 作者:张映 我要评论 这篇 ...
随机推荐
- spring 事务实现方式有哪些?
Spring提供了编程式事务和声明式事务两种实现方式, 编程式事务允许用户在代码中精确定义事务的边界, 而声明式事务(基于AOP)有助于用户将操作与事务规则进行解耦. 简单地说,编程式事务侵入到了业务 ...
- java对象的克隆以及深拷贝与浅拷贝
一.为什么要使用克隆 在实际编程过程中,我们常常要遇到这种情况:有一个对象A,在某一时刻A中已经包含了一些有效值,此时可能 会需要一个和A完全相同新对象B,并且此后对B任何改动都不会影响到A中的值,也 ...
- 学习Apache(四)
介绍 Apache HTTP 服务器被设计为一个功能强大,并且灵活的 web 服务器, 可以在很多平台与环境中工作.不同平台和不同的环境往往需要不同 的特性,或可能以不同的方式实现相同的特性最有效率. ...
- 学习MFS(四)
一.搭建Master Server 1.安装相关编译器.工具包 [root@master ~]# yum -y install gcc gcc-c++ zlib-devel 2.创建进程用户 [roo ...
- 运筹学之"最大最大决策标准"和"最大最小决策标准"
一.最大最大决策标准的解题思路就是:先比较出所有行的最大值,在最大值中选出最大值,最后这个最大是那行的就选哪个方案 二.最大最小决策标准的解题思路就是:先比较出所有行的最小值,在最小值中选出最大值,最 ...
- 当心,你搞的Scrum可能是小瀑布
摘要:有的团队刚接触Scrum,一个问题令他们很困扰:迭代初期开发人员的工作较多,测试人员闲着:迭代末期开发人员闲着,测试人员的工作比较多,怎么解决资源等待的问题呢? 本文分享自华为云社区<当心 ...
- C++大作业——教职工管理系统
教职工信息管理系统 1.问题描述: 设计一个学校职工管理系统,要求实现如下功能:建立职工信息数据, 包括职工编号.姓名. 性别.工资.出生时间.岗位.参加工作时间和年 龄(必须计算得到),初始模拟数据 ...
- numpy入门—numpy是什么
numpy是什么?为什么使用numpy 使用numpy库与原生python用于数组计算性能对比
- 原生JavaScript实现AJAX、JSONP
相信大多数前端开发者在需要与后端进行数据交互时,为了方便快捷,都会选择JQuery中封装的AJAX方法,但是有些时候,我们只需要JQuery的AJAX请求方法,而其他的功能用到的很少,这显然是没必要的 ...
- Spring集成web环境(手动实现)
1.创建UserDao接口及其实现类UserDaoImpl(接口代码省略) public class UserDaoImpl implements UserDao { @Override public ...