Shell编程三剑客之sed

前言
sed工具与之前讲过的grep以及awk合称为Linux三剑客,它在我们Linux系统的操作管理中是被大量使用的文本处理工具,所以学习sed是绝对必要的。

一、Sed编辑器
(1)Sed概述
sed(Stream EDitor)是一个强大而简单的文本解析转换工具,可以读取文本,并根据指定的条件对文本内容进行编辑(删除、替换、添加、移动等),最后输出所有行或者仅输出处理的某些行。
sed也可以在无交互的情况下实现相当复杂的文本处理操作,被广泛应用于Shell脚本中,用以完成各种自动化处理任务。
(2)Sed工作流程
sed 的工作流程主要包括读取、执行和显示三个过程。

读取:sed 从输入流(文件、管道、标准输入)中读取一行内容并存储到临时的缓冲区中(又称模式空间,pattern space)。
执行:默认情况下,所有的 sed 命令都在模式空间中顺序地执行,除非指定了行的地址,否则 sed 命令将会在所有的行上依次执行。
显示:发送修改后的内容到输出流。在发送数据后,模式空间将会被清空。
在所有的文件内容都被处理完成之前,上述过程将重复执行,直至所有内容被处理完。
注意:默认情况下所有的 sed 命令都是在模式空间内执行的,因此输入的文件并不会发生任何变,除非是用重定向存储输出。

(3)Sed基本语法

基本格式:
sed [选项] ‘操作’ 参数
sed [选项] -f scriptfile 参数

  • 常用选项
    • 常用操作

    • 二、Sed用法示例

      (1)Sed输出指定行

      • [root@youzi home]# sed -n ‘p’ passwd #输出所有行
        [root@youzi home]# sed -n ‘3p’ passwd #输出第三行
        [root@youzi home]# sed -n ‘3,5p’ passwd #输出三到五行
        root@youzi home]# sed -n ‘p;n’ passwd #输出所有奇数行
        [root@youzi home]# sed -n ‘n;p’ passwd #输出所有偶数行
        [root@youzi home]# sed -n ‘1,5{p;n}’ passwd #输出1到5行间的奇数行
        [root@youzi home]# sed -n ‘10,${n;p}’ passwd #输出第10行以后的偶数行
        [root@youzi home]# sed -n ‘2,+3p’ passwd #输出从第2行开始的连续的三行
        ————————————————
        版权声明:本文为CSDN博主「羽翔青空」的原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接及本声明。
        原文链接:https://blog.csdn.net/qq1356059950/article/details/124653502

        • 配合正则表达式输出指定行

        [root@yanjing home]# sed -n ‘/the/p’ qwe.txt #输出包含the的行
        [root@yanjing home]# sed -n ‘2,/the/p’ qwe.txt #输出从第二行开始往后第一个包含the的行为止的所有内容
        [root@yanjing home]# sed -n ‘/the/=’ qwe.txt #输出所有包含the的所有行的行号
        [root@yanjing  home]# sed -n ‘/^PI/p’ qwe.txt #输出以PI开头的行
        [root@yanjing  home]# sed -n ‘/[0-9]$/p’ qwe.txt #输出以数字结尾的行
        [root@yanjing  home]# sed -n ‘/<wood>/p’ qwe.txt #输出包含wood单词的行

        (2)插入符合条件的行

      • [root@yanjing home]# sed ‘/the/i 下面有the’ qwe.txt #在含有the的行的前面添加一行内容
        [root@yanjing home]# sed ‘/the/a 上面有the’ qwe.txt #在含有the的行的后面添加一行内容
        [root@yanjing  home]# sed ‘3a在第三行后面添加’ qwe.txt #正赛第三行后面添加一行内容
        “a”表示在当前行的后面一行添加
        当添加多行内容时,可以用\n分隔开,表示换行

        (3)删除符合条件的行

      • [root@youzi home]# sed ‘s/the/THE/’ qwe.txt #将每行中的第一个the替换为THE
        [root@youzi home]# sed ‘s/l/L/2’ qwe.txt #将每行中的第二个l替换成L
        [root@youzi home]# sed ‘s/l/L/g’ qwe.txt #将文件中的所有l都替换成L,g时全局替换
        [root@youzi home]# sed ‘s/l/ /g’ qwe.txt #将文件中的所有l都替换成空字符
        [root@youzi home]# sed ‘s/^/#/’ qwe.txt #将所有行的行首插入#
        [root@youzi home]# sed ‘/the/s/^/#/’ qwe.txt #在所有包含the的行的行首插入#
        [root@youzi home]# nl qwe.txt |sed ‘2,5s/the/THE/g’ #将三到五行中所有的the都替换成THE
        [root@youzi home]# sed ‘/the/o/O/g’ qwe.txt #将所有包含the的行中的o都替换成O

        • 先备份再修改数据

        • (4)迁移符合条件的文本

          • 常用参数
          • [root@youzi shell]# sed ‘/the/{H;d};$G’ qwe.txt #将包含the的行剪切值行尾,{;}用于多个操作,H复制,d删除,{H;d}先复制,再删除
            [root@youzi shell]# sed ‘1,5{H;d};14G’ qwe.txt #将1-5杠内容剪切到17行以后
            [root@youzi shell]# sed ‘/the/w 666.txt’ qwe.txt #将包含the的行复制另存为另一个文件
            [root@youzi shell]# sed ‘/the/r 666.txt’ qwe.txt #将文件666.txt的内容添加到所有包含the的行后
            [root@youzi shell]# sed ‘2aNew’ 666.txt #在第二行插入一行新内容
            [root@youzi shell]# sed ‘/the/aNew’ 666.txt #在所有包含the的行后插入一行新内容
            [root@youzi shell]# sed ‘2aNew\nNew2’ 666.txt #在第三行后插入多行内容

            总结

            • sed的概述,一些基本用法
            • sed常用的选项参数
            • sed的一些应用示例

Linux系统Shell脚本第六章:文件三剑客之sed的更多相关文章

  1. Linux系统Shell脚本编程

    1. shell脚本概念:C语言编写的.命令解释器.编程语言. 是用户使用linux的桥梁. shell脚本语言非常擅长处理文本类型的数据. 2. shell脚本作用:自动化管理.监控管理.日志数据处 ...

  2. Linux系统——shell脚本

    shell脚本编程 作用:通过命令行解析的方式,自动执行设定好的程序或命令代码.(若将脚本挂到定时任务中,就会自动在非工作时间里自动触发执行程序) Shell脚本文件以“.sh”结尾 规范的Shell ...

  3. Linux系统——shell脚本应用示例

    传入一个网段地址,自动找出本网段内存活的IP地址.2,将存活的IP地址当作密码来创建Linux用户,用户名格式为:你的名字_数字 3,有几个存活IP地址,就自动创建几个用户   4,最后将创建的用户名 ...

  4. Linux 用 shell 脚本 批量 导入 csv 文件 到 mysql 数据库

    前提: 每个csv文件第一行为字段名 创建的数据库字段名同csv 文件的字段名 1. 批量导入 多个 csv 文件 for file in ./*.csv;do mv $file tablename. ...

  5. linux服务器批量部署应用系统shell脚本(Tomcat/jetty)

    linux服务器批量部署应用系统shell脚本: 1.请更换代码内的服务器地址(Tomcat或jetty服务器) serverRoot=/home/undoner/java_tool/apache-t ...

  6. Linux简单Shell脚本监控MySQL、Apache Web和磁盘空间

    Linux简单Shell脚本监控MySQL.Apache Web和磁盘空间 1. 目的或任务 当MySQL数据库.Apache Web服务器停止运行时,重新启动运行,并发送邮件通知: 当服务器磁盘的空 ...

  7. Linux:从windows到linux的shell脚本编码和格式

    从windows到linux的shell脚本编码和格式问题 异常问题 :set ff=unix 启动脚本在启动时报错比如执行sh start.sh,时会报Command not found等等的错误, ...

  8. Linux/Unix shell 脚本中调用SQL,RMAN脚本

    Linux/Unix shell脚本中调用或执行SQL,RMAN 等为自动化作业以及多次反复执行提供了极大的便利,因此通过Linux/Unix shell来完成Oracle的相关工作,也是DBA必不可 ...

  9. Linux常用Shell脚本珍藏【转载】

    我们在运维中,尤其是linux运维,都知道脚本的重要性,脚本会让我们的 运维事半功倍,所以学会写脚本是我们每个linux运维必须学会的一门功课,这里收藏linux运维常用的脚本.如何学好脚本,最关键的 ...

  10. Centos7下crontab+shell脚本定期自动删除文件

    问题描述: 最近有个需求,就是rsync每次同步的数据量很多,但是需要保留的数据库bak文件 保留7天就够了,所以需要自动清理文件夹内的bak文件 解决方案: 利用shell脚本来定期删除文件夹内的任 ...

随机推荐

  1. vue构建打包兼容操作(vue代码规范建议)-转载Vuejs项目不改动一行代码同时支持用Rollup,vue-cli,parcel构建的一些建议

  2. .NET 入门到高级路线

    .NET 入门到高级路线 [c# 基础语法](# CSharp基础语法) [.NET Core 基础知识](# .NET Core 基础知识) [ASP.NET Core 基础知识概述](# ASP. ...

  3. JSP第五次作业

    1.教材P78-79  例4-9 1 <%@ page language="java" import="java.util.*" pageEncoding ...

  4. Jenkins CLI命令行

    Jenkins CLI命令行 jenkins不光可以UI操作还提供了命令行接口 位置 首页->系统管理->工具和动作->Jenkins 命令行接口 在这个界面下载一个jenkins- ...

  5. 使用 shell 脚本拼接 srt 字幕文件 (srtcat)

    背景 前段时间迷上了做 B 站视频,主要是摩托车方面的知识分享.做的也比较粗糙,就是几张图片配上语音和字幕进行解说.尝试过自己解说,发现录制视频对节奏的要求还是比较高的,这里面水太深把握不住.好在以 ...

  6. .Net 和 .Net Core 集成Swagger 以及配合JWT身份验证

    Swagger介绍 简单来说swagger是一款WebAPI的接口管理帮助文档,并且可以直接进行接口测试 我们来看一下官网介绍 https://swagger.io Swagger is a powe ...

  7. 样本熵(SampEn)的C/C++代码实现与优化

    正文 本文不介绍什么是样本熵,具体推荐看此文https://blog.csdn.net/Cratial/article/details/79742363,写的很好,里面的示例也被我拿来测试代码写的对不 ...

  8. aspnetcore 原生 DI 实现基于 key 的服务获取

    你可能想通过一个字符串或者其他的类型来获取一个具体的服务实现,那么在 aspnetcore 原生的 MSDI 中,如何实现呢?本文将介绍如何通过自定义工厂来实现. 我们现在恰好有基于 Json 和 M ...

  9. P4238 【模板】多项式乘法逆

    #include <cstdio> #include <iostream> #define re register using namespace std; typedef l ...

  10. JZOJ 5348. 【NOIP2017提高A组模拟9.5】心灵治愈

    题目大意 求 \(b\) (正整数集合)使得 \(\sum_{i=1}^{n+1} a_i \times b_i = 1\) 其中给定 \(b_{n+1}=m\) 且为 \(b\) 中最大值 \(1 ...