点击返回 自学Linux命令行与Shell脚本之路

18.2-sed编辑器高级特性

linux世界中最广泛使用的两个命令行编辑器:

  • sed
  • gawk

1. sed小结

命令格式:

1 sed [options] 'command' file(s)
2 sed [options] -f scriptfile file(s)

选项:

  • -e<script>或--expression=<script>:以选项中的指定的script来处理输入的文本文件;
  • -f<script文件>或--file=<script文件>:以选项中指定的script文件来处理输入的文本文件;
  • -h或--help:显示帮助;
  • -n或--quiet或——silent:仅显示script处理后的结果;
  • -V或--version:显示版本信息。

参数:

文件:指定待处理的文本文件列表。

sed命令:

  • a\      在当前行下面插入文本。
  • i\      在当前行上面插入文本。
  • c\      把选定的行改为新的文本。
  • d      删除,删除选择的行。
  • D      删除模板块的第一行。
  • s      替换指定字符
  • h      拷贝模板块的内容到内存中的缓冲区。
  • H      追加模板块的内容到内存中的缓冲区。
  • g      获得内存缓冲区的内容,并替代当前模板块中的文本。
  • G      获得内存缓冲区的内容,并追加到当前模板块文本的后面。
  • l      列表不能打印字符的清单。
  • n      读取下一个输入行,用下一个命令处理新的行而不是用第一个命令。
  • N      追加下一个输入行到模板块后面并在二者间嵌入一个新行,改变当前行号码。
  • p      打印模板块的行。
  • P(大写)      打印模板块的第一行。
  • q      退出Sed。
  • b lable      分支到脚本中带有标记的地方,如果分支不存在则分支到脚本的末尾。
  • r file      从file中读行。
  • t label      if分支,从最后一行开始,条件一旦满足或者T,t命令,将导致分支到带有标号的命令处,或者到脚本的末尾。
  • T label      错误分支,从最后一行开始,一旦发生错误或者T,t命令,将导致分支到带有标号的命令处,或者到脚本的末尾。
  • w file      写并追加模板块到file末尾。
  • W file      写并追加模板块的第一行到file末尾。
  • !      表示后面的命令对所有没有被选定的行发生作用。
  • =      打印当前行号码。
  • #      把注释扩展到下一个换行符以前。

sed替换标记:

  • g      表示行内全面替换。
  • p      表示打印行。
  • w      表示把行写入一个文件。
  • x      表示互换模板块中的文本和缓冲区中的文本。
  • y      表示把一个字符翻译为另外的字符(但是不用于正则表达式)
  • \1      子串匹配标记
  • &      已匹配字符串标记

sed元字符集:

  • ^      匹配行开始,如:/^sed/匹配所有以sed开头的行。
  • $      匹配行结束,如:/sed$/匹配所有以sed结尾的行。
  • .      匹配一个非换行符的任意字符,如:/s.d/匹配s后接一个任意字符,最后是d。
  • *      匹配0个或多个字符,如:/*sed/匹配所有模板是一个或多个空格后紧跟sed的行。
  • []      匹配一个指定范围内的字符,如/[ss]ed/匹配sed和Sed。
  • [^]      匹配一个不在指定范围内的字符,如:/[^A-RT-Z]ed/匹配不包含A-R和T-Z的一个字母开头,紧跟ed的行。
  • \(..\)      匹配子串,保存匹配的字符,如s/\(love\)able/\1rs,loveable被替换成lovers。
  • &      保存搜索字符用来替换其他字符,如s/love/**&**/,love这成**love**。
  • \<      匹配单词的开始,如:/\<love/匹配包含以love开头的单词的行。
  • \>      匹配单词的结束,如/love\>/匹配包含以love结尾的单词的行。
  • x\{m\}      重复字符x,m次,如:/0\{5\}/匹配包含5个0的行。
  • x\{m,\}      重复字符x,至少m次,如:/0\{5,\}/匹配至少有5个0的行。
  • x\{m,n\}      重复字符x,至少m次,不多于n次,如:/0\{5,10\}/匹配5~10个0的行。

2. sed高级特性--多行命令

所有的sed编辑器命令都是针对单行数据执行操作的,那如果处理多行名利怎么处理,sed编辑器包含了3个特殊的命令:

  • N 将数据流中的下一行加进来创建一个多行组来处理
  • D 删除多行组中的一行
  • P 打印多行组中的一行

2.1 next 命令

2.1.1 单行next命令(小写的n)

n:读入下一行到模式空间,例:’4{n;d}’ 删除第5行。

2.1.2 多行next命令(大写的N)

  •  单行next命令n 会将数据流中的下一个文本行移动到sed编辑器的工作空间(模式空间)
  •  多行next命令N 会将数据流中的下一个文本行添加到模式空间中已有的文本后,也就是讲数据流中的两个文本合并后到同一个模式空间

①如果短语在同一行的话,N命令将下一行合并同一行,相对比较简单。

②如果短语不在同一行的话,替换命令就无法识别了,此时往往使用通配符.来匹配空格和换行符这两种情况。

问题1:匹配了换行符时,就从字符串删掉了换行符,导致两行合并成一行。

解决办法:使用两个替换命令

  • 一个用来匹配短语出现在多行的情况
  • 一个用来匹配短语出现在单行的情况

问题2:如果匹配的文本正好在数据流的最后一行,命令就不会发现匹配的数据。

解决办法:

  • 将单行命令放到N命令前面
  • 将多行命令放到N命令后面

2.2 delete 命令

2.2.1 单行delete命令(小写的d)    (上章已经介绍过了)

d:删除模式空间中的当前行

但是d 与N 一同使用的时候要注意,删除命令会在不同行查找匹配文本,然后在模式空间将所匹配的行全部删掉。

2.2.2 多行delete命令(大写的D)

D:只删除模式空间中的第一行,会删除到换行符位置的所有字符。

2.3 print命令

  • p  (小写)  打印模式空间的当前行
  • P (大写)  打印多行模式空间的第一部分,直到第一个嵌入的换行符位置。在执行完脚本的最后一个命令之后,模式空间的内容自动输出。P命令经常出现在N命令之后和D命令之前。

3. sed高级特性--模式空间、保持空间

  •  模式空间(pattern space)是一块活跃的缓冲区,在执行命令时它会保存待检查的文本
  •  保持空间(hold space)在处理模式空间中的某些行时,可以保持空间来临时保存一些行

有5条命令用来操作保持空间:

  • h 将模式空间复制到保持空间;
  • H 将模式空间附加到保持空间;
  • g 将保持空间复制到模式空间;
  • G 将模式空间附加到保持空间;
  • x 交换模式空间和保持空间的内容

4. sed高级特性--排除命令!

感叹号  ! 命令用来排除命令,就是让原本会起作用的命令不起作用。

5. sed高级特性--改变流

sed编辑器会从脚本的顶部开始,一直执行到脚本的结尾。sed编辑器提供了一个方法改变命令脚本的执行流程。

  • 分支b命令用于无条件转移
  • 测试t命令用于有条件转移。

5.1 分支b命令

 [address]b [lable]
  • 跳转的位置与标签相关联:address决定了哪些行的数据会触发分支命令,lable参数决定了跳转到的位置。
  • 如果有label参数则跳转到标签所在的后面行继续执行。
  • 如果没有label参数,跳转命令会跳转到脚本的结尾。
  • 标签:以冒号开始后接标签名,不要在标签名前后使用空格。
  • 可以为分支命令指定一个模式来查找,如果没有模式,跳转就应该结束。(防止一些无穷循环)

5.2 测试t命令

 [address]t [lable]
  • 测试命令t会根据替换命令结果跳转到某个标签,而不是根据地址进行跳转。
  • 如果替换命令成功匹配并替换了一个模式,测试命令就会跳转指定的标签;如果替换命令没有匹配指定的模式,测试命令就不会跳转。
  • 有指定标签的话,如果测试成功,跳转命令会跳转到脚本的结尾。

6. sed高级特性--模式替换

6.1 &符号用来代表替换命令中的匹配的模式

.at 当模式匹配了单词cat,“cat”就会出现在替换后的单词里。模式匹配了单词hat,“hat”就会出现在替换后的单词里。

6.2 替代单独的单词, 使用替代字符:反斜线+数字

替代字符由反斜线+数字组成,数字表明子模式的位置。sed编辑器会给第一个模式分配字符\1  第二个模式分配字符\2  以此类推。

7. sed高级特性--在脚本中使用sed

7.1 使用包装脚本wrapper

可以将sed命令放到shell包装脚本中,不用每次使用时都重新键入整个脚本。

7.2 重定向sed的输出

在脚本中使用$()将sed编辑器命令的输出重定向到一个变量中。

自学Linux Shell18.2-sed编辑器高级特性的更多相关文章

  1. 自学Linux Shell18.1-sed编辑器基础特性

    点击返回 自学Linux命令行与Shell脚本之路 18.1-sed编辑器基础特性 linux世界中最广泛使用的两个命令行编辑器: sed gawk 1. sed概念 sed是stream edito ...

  2. 自学Linux Shell10.1-使用编辑器vim

    点击返回 自学Linux命令行与Shell脚本之路 10.1-使用编辑器vim 所有的 Unix系统都会内建 vi 文书编辑器,其他的文书编辑器则不一定会存在.但是目前我们使用比较多的是 vim 编辑 ...

  3. 自学Linux Shell18.3-sed实用工具

    点击返回 自学Linux命令行与Shell脚本之路 18.3-sed实用工具 1. 加倍行间距 命令格式: .......

  4. 自学Linux命令行与Shell脚本之路

    自学Linux命令行与Shell脚本之路[第一回]:初识Linux   1.1 自学Linux Shell1.1-Linux初识 1.2 自学Linux Shell1.2-Linux目录结构 1.3  ...

  5. 自学Linux Shell19.2-gawk程序高级特性

    点击返回 自学Linux命令行与Shell脚本之路 19.2-gawk程序高级特性 linux世界中最广泛使用的两个命令行编辑器: sed gawk 1. gawk使用变量 编程语言共有的特性是使用变 ...

  6. 自学Linux Shell19.1-gawk程序基础特性

    点击返回 自学Linux命令行与Shell脚本之路 19.1-gawk程序基础特性 linux世界中最广泛使用的两个命令行编辑器: sed gawk 1. gawk概念 awk是一个强大的文本分析工具 ...

  7. 马哥linux运维初级+中级+高级 视频教程 教学视频 全套下载(近50G)

    马哥linux运维初级+中级+高级 视频教程 教学视频 全套下载(近50G)目录详情:18_02_ssl协议.openssl及创建私有CA18_03_OpenSSH服务及其相关应用09_01_磁盘及文 ...

  8. Linux运维入门到高级全套常用要点

    Linux运维入门到高级全套常用要点 目 录 1. Linux 入门篇................................................................. ...

  9. 自学Linux Shell1.3-Linux文件系统

    点击返回 自学Linux命令行与Shell脚本之路 1.3-Linux文件系统 文件系统是文件存放在磁盘等存储设备上的组织方法.Linux系统能支持多种目前流行的文件系统,如EXT2. EXT3. F ...

随机推荐

  1. Luogu3199 HNOI2009 最小圈 分数规划、SPFA

    传送门 可以发现它的式子是一个分数规划的式子,所以可以二分答案,将所有边权减掉当前二分值之后跑一边$SPFA$判断负环即可. 然而这道题把$BFS-SPFA$卡掉了却没卡$DFS-SPFA$ 出题人: ...

  2. [spark][python]Spark map 处理

    map 就是对一个RDD的各个元素都施加处理,得到一个新的RDD 的过程 [training@localhost ~]$ cat names.txtYear,First Name,County,Sex ...

  3. 机器学习sklearn19.0聚类算法——Kmeans算法

    一.关于聚类及相似度.距离的知识点 二.k-means算法思想与流程 三.sklearn中对于kmeans算法的参数 四.代码示例以及应用的知识点简介 (1)make_blobs:聚类数据生成器 sk ...

  4. Git push 时如何避免出现 "Merge branch 'master' of ..."

    在使用 Git 的进行代码版本控制的时候,往往会发现在 log 中出现 "Merge branch 'master' of ..." 这句话,如下图所示.日志中记录的一般为开发过程 ...

  5. MySQL数据库对象-索引

    1. 概述2. 索引分类2.1 不同索引的概念2.1.1 普通索引2.1.2 唯一索引2.1.3 全文索引2.1.4 多列索引3. 索引操作3.1 普通索引3.1.1 创建表时创建普通索引3.1.2 ...

  6. 重建索引解决mssql表查询超时的问题

    表已有数据,150万+,执行一个group by 的查询出现超时,一个一个条件减少尝试,前几个where条件不超时,而在加上最后一个条件时就超时了. 分析表的索引建立情况:DBCC showconti ...

  7. php安全配置记录和常见错误梳理

    通常部署完php环境后会进行一些安全设置,除了熟悉各种php漏洞外,还可以通过配置php.ini来加固PHP的运行环境,PHP官方也曾经多次修改php.ini的默认设置.下面对php.ini中一些安全 ...

  8. Fedora 19关闭防火墙

    关闭防火墙systemctl stop firewalld.service 关闭开机启动防火墙systemctl disable firewalld.service

  9. 结构化分析(SA)

    1.什么叫模型?我觉得它的关键字:抽象 重要特征 降低复杂度. 2.软件设计的方法 分类:面向功能~,面向对象的设计. 面向数据流的方法是在结构化分析中提到的. 哦~ 3.面向数据流的结构化分析 特点 ...

  10. [转帖] testin 安全测试要点