阿里云-云小站(无限量代金券发放中)
【腾讯云】云服务器、云数据库、COS、CDN、短信等热卖云产品特惠抢购

一篇文章学会shell工具篇之sed

70次阅读
没有评论

共计 2517 个字符,预计需要花费 7 分钟才能阅读完成。

sed 工具执行原理;

  • 有关 sed 的参数及 action 的常见操作方法;
  • 定址;
  • 模式空间和保持空间;
  • 使用标签

1. 首先先来了解一下什么是 sed?

sed 叫做流编辑器,在 shell 脚本和 Makefile 中作为过滤器使用非常普遍,也就是把前一个程序的输出引入 sed 的输入,经过一系列编辑命令转换成为另一种格式输出。下面我们通过一张原理图来了解一下它的工作模式:

编辑命令的格式为,sed   /pattern/action

一篇文章学会 shell 工具篇之 sed

经过 sed 处理后文件内容并没有改变,除⾮使用重定向存储输出。sed 主要用来自动编辑一个或多个文件;简化对文件的反复操作;sed 默认按照 Basic 规范基本匹配!也就是说类似于() {} | 等特殊字符需转义,否则就不识别,或者是用扩展模式也可以。

2. 下面重点介绍一下有关 sed 的参数及 action 的操作方法

(1)- n 参数,p 命令的 action

一篇文章学会 shell 工具篇之 sed

(2) d 命令的 action

一篇文章学会 shell 工具篇之 sed

一篇文章学会 shell 工具篇之 sed

(3)/pattern/s/pattern1/pattern2/:查找符合 pattern 的行, 将该行第一个匹配 pattern1 的字符串替换为 pattern2
/pattern/s/pattern1/pattern2/g:查找符合 pattern 的行, 将该行所有匹配 pattern1 的字符串替换为 pattern2

一篇文章学会 shell 工具篇之 sed

一篇文章学会 shell 工具篇之 sed

这个操作不知道大家会不会联想到 vim 编辑器中的底行模式搜索,它们是类似的。

下面总结一下 sed 中参数的选择及执行操作:

[plain] view plain copy

  1. <strong> 参数选择:
  2. -n: 一般 sed 命令会把所有数据都输出到屏幕,如果加入 - n 选项的话,则只会把经过 sed 命令处理的行输出到屏幕。
  3. -e: 允许对输入数据应用多条 sed 命令编辑。
  4. -i: 将修改结果直接写入到读取数据的文件,而不是由屏幕输出。(1. 修改了文件; 2. 由 cat 可查看)
  5. -f: 指定 sed 脚本的文件名。
  6.  
  7.  
  8. action:
  9. a: 追加,在当前行后添加一行或多行。
  10. c: 行替换,用 c 后面的字符串替换原数据行。
  11. i: 插入,在当前行前插入一行或多行。
  12. p: 打印,输出指定的行。
  13. s: 字符串替换,用一个字符串替换另外一个字符串。格式为”行范围 s / 旧字符串 / 新字符串 /g”(如果不加 g 的话,则表示只替换每行第一个匹配的串)。
  14. </strong>

以上没有练习到的,有兴趣的可以去尝试尝试!

3. 再来介绍一下 sed 中的定址

定址用于决定对文件中哪些行进行行编辑,地址的形式可以是数字、正则表达式、或二者的结合。如果没有指定地址,sed 将处理输入文件的所有行。下面举一些例子:

一篇文章学会 shell 工具篇之 sed

一篇文章学会 shell 工具篇之 sed

sed ‘/start/ ,/end/d’ file   #删除包含’start’行和’end’行之间的行
sed ‘/start/, 10d’ file       #删除包含’start’的行到第十行的内容

4. 模式空间和保持空间

(1)保持空间: 用来存储数据,相当于一个仓库,它不能对数据进行处理 ;
(2)模式空间: 专门以行为单位对数据进行处理。

 一般情况下,如果不显示的使用一些选项的话,是不会用到保持空间的。

[plain] view plain copy

  1. <span style=”color:#000000;”><strong> 命令:
  2. g: 将保持空间的内容拷贝到模式空间中,会将模式空间原来的值覆盖掉。
  3. G: 将保持空间的内容追加到模式空间中。
  4. h: 将模式空间的值拷贝到保持空间,会将保持空间原来的值覆盖掉。
  5. H: 将模式空间的值追加到保持空间中。
  6. d: 删除模式空间的所有行,并读下一行到模式空间。
  7. D: 删除模式空间的第一行,不读下一行到模式空间。
  8. n: 输出模式空间的行,读取下一行替换当前模式空间的行,接着执行下一条处理命令而不是第一条命令。
  9. N: 读入下一行,追加到模式空间行后面,此时模式空间中有两行。
  10. x: 交换模式空间和保持空间的内容。
  11. </strong></span>

例 1:给每行后面添加一行空行

一篇文章学会 shell 工具篇之 sed

例 2:用 sed 模拟倒序 (tac) 打印的过程

一篇文章学会 shell 工具篇之 sed

例 3. 追加匹配行到文件末尾

一篇文章学会 shell 工具篇之 sed

例 4:将一列内容变为一行

一篇文章学会 shell 工具篇之 sed

例 5:求出 1 -100 的求和

一篇文章学会 shell 工具篇之 sed

例 6:打印输出奇数行和偶数行

一篇文章学会 shell 工具篇之 sed

5. 使用标签

[plain] view plain copy

  1. :a 表示标签 a;
  2. ba 表示跳转到 a 标签;
  3. $ 表示最后一行;
  4. !表示不做后续操作
  5. 所以,$!ba 表示最后一行不用跳转到 a 标签,结束此次操作。

下面举一个例子:

一篇文章学会 shell 工具篇之 sed

最后补充一点:

[plain] view plain copy

  1. 与 grep 一样,sed 也支持特殊元字符来进行模式查找、替换。不同的是,sed 使用的正则表达式是括在斜杠线 ”/” 之间的模式。
  2. 如果要把正则表达式分隔符 ”/” 改为另一个字符,比如 o,只要在这个字符前加一个反斜线,在字符后跟上正则表达式,再跟上这个字符即可。例如:sed -n ‘\o^56op’ datafile
  3. ^:行首定位符         /^my/  匹配所有以 my 开头的行;
  4. $:行尾定位符        /my$/ 匹配所有以 my 结尾的行;
  5. .:匹配除换行符以外的单个字符        /m..y/ 匹配包含字母 m,后跟两个任意字符,再跟字母 y 的行;
  6. *:匹配零个或多个前导字符             /test*/ 匹配包含字符串 tes, 后跟零个或多个 t 字母的行;
  7. []:匹配指定字符组内的任一字符    /t[eE]st/ 匹配包含 test 或 tEst 的行;
  8. [^]:匹配不在指定字符组内的任一字符     /t[^eE]st/  匹配 string 以 t 开头,但 st 之前的那个字符不是 e 或 E 的行;
  9. &:保存查找串以便在替换串中引用         s/test/*&*/g  符号 & 代表查找串。test 将被替换为 *test*
  10.  
  11. \<:词⾸首定位符 /\<my/ 匹配包含以 my 开头的单词的行;
  12. \>:词尾定位符    /my\>/ 匹配包含以 my 结尾的单词的行;
  13. x\{m\}:连续 m 个 x        如:/9\{5\}/ 匹配包含连续 5 个 9 的行;
  14. x\{m,\}:至少 m 个 x       如:/9\{5,\}/ 匹配包含至少连续 5 个 9 的行;
  15. x\{m,n\}:至少 m 个,但不超过 n 个 x     如:/9\{5,7\}/ 匹配包含连续 5 到 7 个 9 的行。

还有一个单元匹配 – 替换的问题:

一篇文章学会 shell 工具篇之 sed

 

正文完
星哥说事-微信公众号
post-qrcode
 0
星锅
版权声明:本站原创文章,由 星锅 于2022-12-03发表,共计2517字。
转载说明:除特殊说明外本站文章皆由CC-4.0协议发布,转载请注明出处。
【腾讯云】推广者专属福利,新客户无门槛领取总价值高达2860元代金券,每种代金券限量500张,先到先得。
阿里云-最新活动爆款每日限量供应
评论(没有评论)
验证码
【腾讯云】云服务器、云数据库、COS、CDN、短信等云产品特惠热卖中