流编辑器sed
sed一次处理一行文件并把输出送往屏幕。sed把当前处理的行存储在临时缓冲区中,称为模式空间(pattern space)。一旦sed完成对模式空间中的行的处理,模式空间中的行就被送往屏幕。行被处理完成之后,就被移出模式空间,程序接着读入下一行,处理,显示,移出……文件输入的最后一行被处理完以后sed结束。通过存储每一行在临时缓冲区,然后在缓冲区中操作该行,保证了原始文件不会被破坏。
1、sed的命令选项
命令 功能描述
a\ 在当前行的后面加入一行或者文本。
c\ 用新的文本改变或者替代本行的文本。
d 从pattern space位置删除行。
i\ 在当前行的上面插入文本。
h 拷贝pattern space的内容到holding buffer(特殊缓冲区)。
H 追加pattern space的内容到holding buffer。
g 获得holding buffer中的内容,并替代当前pattern space中的文本。
G 获得holding buffer中的内容,并追加到当前pattern space的后面。
n 读取下一个输入行,用下一个命令处理新的行而不是用第一个命令。
p 打印pattern space中的行。
P 打印pattern space中的第一行。
q 退出sed。
w file 写并追加pattern space到file的末尾。
! 表示后面的命令对所有没有被选定的行发生作用。
s/re/string 用string替换正则表达式re。
= 打印当前行号码。
替换标记
g 行内全面替换,如果没有g,只替换第一个匹配。
p 打印行。
x 互换pattern space和holding buffer中的文本。
y 把一个字符翻译为另一个字符(但是不能用于正则表达式)。
选项
-e 允许多点编辑。
-n 取消默认输出。
2、示例
/>cat passwd 1root:x:0:0:root:/root:/bin/bash 2bin:x:1:1:bin:/bin:/sbin/nologin 3daemon:x:2:2:daemon:/sbin:/sbin/nologin 4adm:x:3:4:adm:/var/adm:/sbin/nologin 5lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin 6sync:x:5:0:sync:/sbin:/bin/sync /> sed ‘/root/p’ passwd #如果模板root被找到,sed除了打印所有行之外,还有打印匹配行。 1root:x:0:0:root:/root:/bin/bash 1root:x:0:0:root:/root:/bin/bash 2bin:x:1:1:bin:/bin:/sbin/nologin 3daemon:x:2:2:daemon:/sbin:/sbin/nologin 4adm:x:3:4:adm:/var/adm:/sbin/nologin 5lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin 6sync:x:5:0:sync:/sbin:/bin/sync #-n选项取消了sed的默认行为。在没有-n的时候,包含模板的行被打印两次,但是在使用-n的时候将只打印包含模板的行。 />sed -n ‘/root/p’ passwd 1root:x:0:0:root:/root:/bin/bash />sed ‘3d’ passwd #第三行被删除,其他行默认输出到屏幕。 1root:x:0:0:root:/root:/bin/bash 2bin:x:1:1:bin:/bin:/sbin/nologin 4adm:x:3:4:adm:/var/adm:/sbin/nologin 5lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin 6sync:x:5:0:sync:/sbin:/bin/sync />sed ‘3,$d’ passwd #从第三行删除到最后一行,其他行被打印。$表示最后一行。 1root:x:0:0:root:/root:/bin/bash 2bin:x:1:1:bin:/bin:/sbin/nologin />sed ‘$d’ passwd #删除最后一行,其他行打印。 1root:x:0:0:root:/root:/bin/bash 2bin:x:1:1:bin:/bin:/sbin/nologin 3daemon:x:2:2:daemon:/sbin:/sbin/nologin 4adm:x:3:4:adm:/var/adm:/sbin/nologin 5lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin />sed ‘/root/d’ passwd #删除所有包含root的行,其他行打印。 2bin:x:1:1:bin:/bin:/sbin/nologin 3daemon:x:2:2:daemon:/sbin:/sbin/nologin 4adm:x:3:4:adm:/var/adm:/sbin/nologin 5lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin 6sync:x:5:0:sync:/sbin:/bin/sync
#s表示替换,g表示命令作用于整个当前行。如果该行存在多个root,都将被替换为none,如果没有g,则只是替换第一个匹配。
/>sed ‘s/root/none/g’ passwd 1none:x:0:0:none:/none:/bin/bash 2bin:x:1:1:bin:/bin:/sbin/nologin 3daemon:x:2:2:daemon:/sbin:/sbin/nologin 4adm:x:3:4:adm:/var/adm:/sbin/nologin 5lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin 6sync:x:5:0:sync:/sbin:/bin/sync
#-n表示只打印匹配行,如果某一行的开头是root,则替换为none。
/>sed -n ‘s/root/none/p’ passwd 1none:x:0:0:root:/root:/bin/bash
#&符号表示替换字符串中被找到的部分。所有以nologin结束的行,最后nologin都将被它们自己替换,同时追加anytime
/>sed ‘s/nologin$/&anytime/’ passwd 2bin:x:1:1:bin:/bin:/sbin/nologinanytime 3daemon:x:2:2:daemon:/sbin:/sbin/nologinanytime 4adm:x:3:4:adm:/var/adm:/sbin/nologinanytime 5lp:x:4:7:lp:/var/spool/lpd:/sbin/nologinanytime 6sync:x:5:0:sync:/sbin:/bin/sync
#所有的root被替换为none。-n选项加p命令则表示只打印匹配行。
/>sed -n ‘s/root/none/gp’ passwd 1none:x:0:0:none:/none:/bin/bash
#模板ba被包含在一对括号中,并在特殊的寄存器中保存为tag 1,它将在后面作为\1替换字符串,bash被替换为bashell。
/>sed -n ‘s/\(ba\)sh/\1shell/p’ passwd 1root:x:0:0:root:/root:/bin/bashell
#s后面的字符一定是分隔搜索字符串和替换字符串的分隔符,默认为斜杠,但是在s命令使用的情况下可以改变。不论什么字符紧跟着s命令都认为是新的分隔符。这个技术在搜索含斜杠的模板时非常有用,例如搜索时间和路径的时候。
/>sed -n ‘s#root#none#gp’ passwd 1none:x:0:0:none:/none:/bin/bash #所有在模板root和adm所确定的范围内的行都被打印,如果root出现在adm后面的行中,从root开始到下一个adm,无论这个adm出现在哪里,二者之间的行都被打印,即使从root开始到文件的末尾还没有出现adm,那么从root到末尾的所有行都将打印。 >/sed -n ‘/root/,/adm/p’ passwd 1root:x:0:0:root:/root:/bin/bash 2bin:x:1:1:bin:/bin:/sbin/nologin 3daemon:x:2:2:daemon:/sbin:/sbin/nologin 4adm:x:3:4:adm:/var/adm:/sbin/nologin #打印出第4行到以6开头的行 >/sed -n ‘4,/^6/p’ passwd 4adm:x:3:4:adm:/var/adm:/sbin/nologin 5lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin 6sync:x:5:0:sync:/sbin:/bin/sync #-e选项表示多点编辑。第一个编辑命令是删除第1到第4行。第二个编辑命令是用bash替换nologin。 />sed -e ‘1,4d’ -e ‘s/nologin/bash/p’ passwd 5lp:x:4:7:lp:/var/spool/lpd:/sbin/bash 5lp:x:4:7:lp:/var/spool/lpd:/sbin/bash 6sync:x:5:0:sync:/sbin:/bin/sync #将所有匹配nologin的行写入新文件nologin中 >/sed -n ‘/nologin/w nologin’ passwd >/cat nologin 2bin:x:1:1:bin:/bin:/sbin/nologin 3daemon:x:2:2:daemon:/sbin:/sbin/nologin 4adm:x:3:4:adm:/var/adm:/sbin/nologin 5lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin #在匹配行adm的前面插入now insert 一行 >/sed ‘/adm/i\now insert!’ passwd 1root:x:0:0:root:/root:/bin/bash 2bin:x:1:1:bin:/bin:/sbin/nologin 3daemon:x:2:2:daemon:/sbin:/sbin/nologin now insert! 4adm:x:3:4:adm:/var/adm:/sbin/nologin 5lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin 6sync:x:5:0:sync:/sbin:/bin/sync
#找到匹配模式adm的行后,执行后面花括号中的一组命令,每个命令之间用逗号分隔,n表示定位到匹配的下一行,s/lp/lamp/完成lamp到lp的替换,p和-n选项的合用,则只是打印作用到的行。
/>sed -n ‘/daemon/{n;s/nologin/bash/;p}’ passwd 4adm:x:3:4:adm:/var/adm:/sbin/bash #-e表示多点编辑,第一个编辑命令y将前2行中的所有小写字母替换为大写字母,-n表示不显示替换后的输出,第二个编辑命令将只是打印输出转换后的前3行。注意y不能用于正则。 >/sed -n -e ‘1,2y/abcdefghijklmnopqrstuvwxyz/ABCDEFGHIJKLMNOPQRSTUVWXYZ/’ -e ‘1,3p’ passwd 1ROOT:X:0:0:ROOT:/ROOT:/BIN/BASH 2BIN:X:1:1:BIN:/BIN:/SBIN/NOLOGIN 3daemon:x:2:2:daemon:/sbin:/sbin/nologin
#打印完第一行后退出
>/sed ‘1q’ passwd 1root:x:0:0:root:/root:/bin/bash #当模板adm在某一行被匹配,替换命令首先将nologin替换为bash,然后再用q退出sed。 />sed ‘/adm/{s/nologin/bash/;q}’ passwd
#在sed处理文件的时候,每一行都被保存在pattern space的临时缓冲区中。除非行被删除或者输出被取消,否则所有被处理过的行都将打印在屏幕上。接着pattern space被清空,并存入新的一行等待处理。在下面的例子中,包含模板的adm行被找到,并被放入pattern space中,h命令将其复制并存入一个称为holding buffer的特殊缓冲区内。在第二个sed编辑命令中,当达到最后一行后,G命令告诉sed从holding buffer中取得该行,然后把它放回到pattern space中,且追加到现在已经存在于模式空间的行的末尾。
/>sed -e ‘/adm/h’ -e ‘$G’ passwd 1root:x:0:0:root:/root:/bin/bash 2bin:x:1:1:bin:/bin:/sbin/nologin 3daemon:x:2:2:daemon:/sbin:/sbin/nologin 4adm:x:3:4:adm:/var/adm:/sbin/nologin 5lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin 6sync:x:5:0:sync:/sbin:/bin/sync 4adm:x:3:4:adm:/var/adm:/sbin/nologin
#如果模板root在某一行被匹配,h命令将使得该行从pattern space中复制到holding buffer中,d命令在将该行删除,因此root匹配行没有在原来的位置被输出。第二个命令搜索adm,一旦被找到,G命令将从holding buffer中取回行,并追加到当前pattern space的行末尾。简单的说,root所在的行被移动并追加到包含adm行的后面。
/>sed -e ‘/root/{h;d;}’ -e ‘/adm/{G;}’ passwd 2bin:x:1:1:bin:/bin:/sbin/nologin 3daemon:x:2:2:daemon:/sbin:/sbin/nologin 4adm:x:3:4:adm:/var/adm:/sbin/nologin 1root:x:0:0:root:/root:/bin/bash 5lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin 6sync:x:5:0:sync:/sbin:/bin/sync
#第一个命令将匹配root的行从pattern space复制到holding buffer,第二个命令在读取的文件的末尾时,g命令告诉sed从holding buffer中取得行,并把它放回到pattern space中,以替换已经存在于pattern space中的。简单说就是包含模板root的行被复制并覆盖了文件的末尾行。
/>sed -e ‘/root/h’ -e ‘$g’ passwd 1root:x:0:0:root:/root:/bin/bash 2bin:x:1:1:bin:/bin:/sbin/nologin 3daemon:x:2:2:daemon:/sbin:/sbin/nologin 4adm:x:3:4:adm:/var/adm:/sbin/nologin 5lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin 1root:x:0:0:root:/root:/bin/bash
#模板root匹配的行被h命令复制到holding buffer,再被d命令删除。结果可以看出root的原有位置没有输出。第二个编辑命令将找到匹配adm的行,g命令将取得holding buffer中的行,并覆盖当前pattern space中的行,即匹配adm的行。简单的说,任何包含模板northeast的行都将被复制,并覆盖包含adm的行。
/>sed -e ‘/root/{h;d;}’ -e ‘/adm/{g;}’ passwd 2bin:x:1:1:bin:/bin:/sbin/nologin 3daemon:x:2:2:daemon:/sbin:/sbin/nologin 1root:x:0:0:root:/root:/bin/bash 5lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin 6sync:x:5:0:sync:/sbin:/bin/sync
#第一个编辑中的h命令将匹配Patricia的行复制到holding buffer中,第二个编辑中的x命令,会将holding buffer中的文本拷贝到pattern space中,而pattern space中的文本被复制到holding buffer中。因此在打印匹配adm行的地方打印了holding buffer中的文本,即第一个命令中匹配Patricia的行文本,第三个编辑命令会将交互后的holding buffer中的文本在最后一行的后面打印出来。
/>sed -e ‘/root/{h;d;}’ -e ‘/adm/{x;}’ -e ‘$G’ passwd 2bin:x:1:1:bin:/bin:/sbin/nologin 3daemon:x:2:2:daemon:/sbin:/sbin/nologin 1root:x:0:0:root:/root:/bin/bash 5lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin 6sync:x:5:0:sync:/sbin:/bin/sync 4adm:x:3:4:adm:/var/adm:/sbin/nologin
:wink: :wink:
很好,很实用,感谢!