Sed and awk 笔记之 sed 篇：模式空间与地址匹配

2012-11-26 系统管理 30,591 人浏览过 5 个评论

模式空间

在上一篇Sed&awk笔记之sed篇：简单介绍中，我们曾经介绍过简单的sed处理流程，这里首先回顾下：

  1. 读入新的一行内容到缓存空间；
  2. 从指定的操作指令中取出第一条指令，判断是否匹配pattern；
  3. 如果不匹配，则忽略后续的编辑命令，回到第2步继续取出下一条指令；
  4. 如果匹配，则针对缓存的行执行后续的编辑命令；完成后，回到第2步继续取出下一条指令；
  5. 当所有指令都应用之后，输出缓存行的内容；回到第1步继续读入下一行内容；
  6. 当所有行都处理完之后，结束；

由此可见，sed并非是将一个编辑命令分别应用到每一行，然后再取下一个编辑命令。恰恰相反，sed是以行的方式来处理的。另外一方面，每一行都是被读入到一块缓存空间，该空间名为模式空间(pattern space)，这是一个很重要的概念，在后文中会多次被提及。因此sed操作的都是最初行的拷贝，同时后续的编辑命令都是应用到前面的命令编辑后输出的结果，所以编辑命令之间的顺序就显得格外重要。

简单例子

让我们来看一个非常简单的例子，将一段文本中的pig替换成cow，并且将cow替换成horse：

$ sed 's/pig/cow/;s/cow/hores/' input

继续阅读

sed1line 笔记

2012-10-04 系统管理 22,402 人浏览过 7 个评论

这篇是当初看完Chinaunix论坛的帖子“抛砖引玉----翻译加注sed1line”的笔记，最近无聊从Evernote翻出来。本文假设测试文件名为test.txt。

文件空行处理

1. 在文件中的每一行后面添加一个空行。

sed 'G' test.txt

解释： Get命令是将保留空间的内容取出，并添加到当前模式空间的内容之后（添加一行）。当保留空间为空时，效果为往模式空间添加一行空行。

2. 保证文件中的每一行后面都有一行空行。和1不同的是，如果文件中本身包含空行，则合并成一行。

sed '/^$/d;G' test.txt

解释：首先删除空行，再添加一行空行。

3. 删除偶数行

sed 'n;d' test.txt

解释：n的意思读入下一行，并且输出当前行。当n读入下一行之后，用d将其删除。

继续阅读

Sed 命令地址匹配问题总结

2012-03-29 系统管理 9,380 人浏览过 7 个评论

这个问题来源于ChinaUnix的一篇帖子“sed地址和模式匹配的问题”。

man sed手册说明

Sed默认的命令执行范围是全局的，如果想仅对其中部分行执行命令，可以使用地址限制。在Manual手册中有一节关于地址的描述，摘取部分如下：

Sed commands can be given with no addresses, in which case the command will be executed for all input lines;

Sed默认是全局编辑的，因此如果不明确指定行的话，命令会在所有输入行上执行。

with one address, in which case the command will only be executed for input lines which match that address;

如果指定一个行地址，那么sed命令就限制在那一行执行。

or with two addresses, in which case the command will be executed for all input lines which match the inclusive range of lines starting from the first address and continuing to the second address.

如果给了两个地址，即地址对（或者地址范围），则命令在匹配的这个地址范围内执行。但是需要注意的几点是：

The syntax is addr1,addr2 (i.e., the addresses are separated by a comma); the line which addr1 matched will always be accepted, even if addr2 selects an earlier line; If addr2 is a regexp, it will not be tested against the line that addr1 matched.

继续阅读