Linux | c&cpp | Email | github | QQ群:425043908 关注本站

itarticle.cc

您现在的位置是:网站首页 -> Linux 文章内容

linux sed命令-itarticl.cc-IT技术类文章记录&分享

发布时间: 9年前Linux 107人已围观返回

全名:stream editor 流编辑器

既然是流编辑器,就需要有输入流,也就是所谓的输入文件;

sed与awk类似,其原理为:读LINE(x)至缓冲区中--->对LINE(x)使用脚本进行处理--->输出LINE(x)

---------------------------------------------------------------------------------

#vi test.txt 文件内容如下:

My name is Liu YiLing.

I am a boy.

I am 23 now(2016-04-23).

I like cooking delicious something.

---------------------------------------------------------------------------------


0.打印行号&打印该行&执行脚本

e:后跟执行命令 =:打印行号 p:打印该行 -'s/I/Liu YiLing/g':替换

#sed -e '=' -e 'p' -e 's/I/Liu YiLing/g' test.txt

-------------------------------------------------------------------------

注意,为了使代码清晰,接下来的代码中省略e:后跟执行命令

-------------------------------------------------------------------------


1.匹配&替换--仅仅输出到控制台

把"I am"替换成"Liu YiLing is" 并输出到控制台

#sed 's/I am/Liu YiLing is/g' test.txt

My name is Liu YiLing.

Liu YiLing is a boy.

Liu YiLing is 23 now(2016-04-23).

I like cooking delicious something.


2.匹配&替换--输出到新文件

把把"I am"替换成"Liu YiLing is" 并通过重定向输出到newfile.txt中

#sed 's/I am/Liu YiLing is/g' test.txt>newfile.txt


3.匹配&替换--直接修改文本内容

-i:指定备份文件的名称

//替换test.txt的内容,并把替换后的内容,直接写入test.txt中,同时把修改前的test.txt备份到test.txt.bak中

Linux:

#sed -i.bak 's/I am/Liu YiLing is/g' test.txt

MacOs:

#sed -i '.bak' 's/I am/Liu YiLing is/g' test.txt

#cat test.txt //

My name is Liu YiLing.

Liu YiLing is a boy.

Liu YiLing is 23 now(2016-04-23).

I like cooking delicious something.

#cat test.txt.bak

My name is Liu YiLing.

I am a boy.

I am 23 now(2016-04-23).

I like cooking delicious something.


4.在行头添加内容

//在每一行的前面添加"%", ^表示行首

#sed 's/^/%/g' test.txt

%My name is Liu YiLing.

%I am a boy.

%I am 23 now(2016-04-23).

%I like cooking delicious something.


5.在行尾添加内容

//在每一行的行尾添加"---", $表示行尾

#sed 's/$/---/g' test.txt

My name is Liu YiLing.---

I am a boy.---

I am 23 now(2016-04-23).---

I like cooking delicious something.---


6.指定行数

//把第2,3行的"I"被替换成"Liu YiLing"

#sed '2,3s/I/Liu YiLing is/g' test.txt

My name is Liu YiLing.

Liu YiLing is am a boy. //第2行的"I"被替换成"Liu YiLing"

Liu YiLing is am 23 now(2016-04-23). //第3行的"I"被替换成"Liu YiLing"

I like cooking delicious something.


7.指定匹配替换的索引

#cat test2.txt

a a a a

a a a a

a a a a


//只替换每一行的第1个a

#sed 's/a/A/1' test2.txt

A a a a

A a a a

A a a a


//只替换每一行的第2个a

#sed 's/a/A/2' test2.txt

a A a a

a A a a

a A a a

//只替换每一行的第三个以后的a替换成A

#sed 's/a/A/3g' test2.txt (linux)

a a A A

a a A A

a a A A

执行奇数行

#sed '1~2s/a/A/g' test2.txt 执行1,3,5,7行:其中波浪线代表跳跃区间

A A A A

a a a a

A A A A


8.多行匹配

//1-2行中的第三个及其以后的a替换为A,3-最后一行的每个a都替换为AA

#sed '1,2s/a/A/3g; 3,$s/a/AA/g' test2.txt

a a A A

a a A A

AA AA AA AA

AA AA AA AA

AA AA AA AA


9.使用匹配字符--&代表匹配的字符串

//对1-2行的所有a替换成["a"]这样的形式

#sed '1,2s/a/["&"]/g' test2.txt

["a"] ["a"] ["a"] ["a"]

["a"] ["a"] ["a"] ["a"]

a a a a

a a a a

a a a a


10.使用圆括号做索引匹配

//1-2行中匹配到This is my ([^,]*\),.*is (.*)替换为--->圆括号1内容:圆括号2内容

#sed '1,2s/This is my \([^,]*\),.*is \(.*\)/\1:\2/g' test2.txt

a a a a

a a a a

a a a a

a a a a

a a a a

#cat test3.txt

the first line

the second line

the third line

the forth line


11.在某一行之前添加行

//在第一行之前追加一行"the new added line", i---insert

#sed "1 i the new added line" test3.txt

the new added line

the first line

the second line

the third line

the forth line


12.在某一行之后追加行

//在第一行之后追加一行, a---append

#sed "1 a the new added line" test3.txt

the first line

the new added line

the second line

the third line

the forth line

//在最后一行之后追加一行追加行:$表示最后一行, a---append

#sed "$ a the new added line" test3.txt

the first line

the second line

the third line

the forth line

the new added line

//找到所有含有"line"的行,并在其后追加行"the new added line"

#sed "/line/a the new added line" test3.txt

the first line

the new added line

the second line

the new added line

the third line

the new added line

the forth line

the new added line


13.删除行

//删除第2行

#sed '2d' test3.txt

the first line

the third line

the forth line


//从第二行开始全部删除,2,$表示从2开始到最后一行

#sed '2,$d' test3.txt

the first line


//匹配日&&删除行--删除匹配fish的那一行

#sed '/second/d' test3.txt

the first line

the third line

the forth line


14.匹配替换行

//把含有third的行,全部替换成"replaced line" , c:替换

#sed "/third/c replaced line" test3.txt

the first line

the second line

replaced line

the forth line

OK,到此刻你是否已经发现,sed其实和正则表达式有很大的关联?

没错,前面所用到的^,$都是正则表达式的一部分

---------------------------------------------------------------------------------

正则表达式:

^:开头--如:/^#/ 以#开头的匹配

$:结尾--如:/}$/ 以}结尾的匹配

.:任意字符

[1-5],[a-b]:从1-5或者a-b中的字符

?:0或1--如:a? 表示0或1个a

+:1或多--如:a+ 表示1或多个a

*:0或多--如:a* 表示0或多个a

^:去除--如:[^a] 表示非a的字符

{n,m}:n到m--如:a{2,5} 表示2到5个a

\n:前面n个组合 123\n 表示n个连续的123

\|:或 123\|234 表示123或者234

例子:

[[:digit:]]{4} 匹配任意4位数

^[0-9\.]$ 匹配任意数字

转义:

\.,\-,\\,

---------------------------------------------------------------------------------

一个例子:

#cat test4.txt

This is what I meant. Understand?

我们打算把tag外的内容提取出来

//本质就是把<>里面的内容替换成空

#sed "s/<[^>]*>//g" test4.txt

This is what I meant. Understand?


总结:

1. 定址

可以通过定址来定位你所希望编辑的行,该地址用数字构成,用逗号分隔的两个行数表示以这两行为起止的行的范围(包括行数表示的那两行)。如1,3表示1,2,3行,美元符号($)表示最后一行。范围可以通过数据,正则表达式或者二者结合的方式确定 。


2. Sed命令

调用sed命令有两种形式:

*

sed [options] 'command' file(s)

*

sed [options] -f scriptfile file(s)

a\

在当前行后面加入一行文本。

b lable

分支到脚本中带有标记的地方,如果分支不存在则分支到脚本的末尾。

c\

用新的文本改变本行的文本。

d

从模板块(Pattern space)位置删除行。

D

删除模板块的第一行。

i\

在当前行上面插入文本。

h

拷贝模板块的内容到内存中的缓冲区。

H

追加模板块的内容到内存中的缓冲区

g

获得内存缓冲区的内容,并替代当前模板块中的文本。

G

获得内存缓冲区的内容,并追加到当前模板块文本的后面。

l

列表不能打印字符的清单。

n

读取下一个输入行,用下一个命令处理新的行而不是用第一个命令。

N

追加下一个输入行到模板块后面并在二者间嵌入一个新行,改变当前行号码。

p

打印模板块的行。

P(大写)

打印模板块的第一行。

q

退出Sed。

r file

从file中读行。

t label

if分支,从最后一行开始,条件一旦满足或者T,t命令,将导致分支到带有标号的命令处,或者到脚本的末尾。

T label

错误分支,从最后一行开始,一旦发生错误或者T,t命令,将导致分支到带有标号的命令处,或者到脚本的末尾。

w file

写并追加模板块到file末尾。

W file

写并追加模板块的第一行到file末尾。

!

表示后面的命令对所有没有被选定的行发生作用。

s/re/string

用string替换正则表达式re。

=

打印当前行号码。

#

把注释扩展到下一个换行符以前。

以下的是替换标记

*

g表示行内全面替换。

*

p表示打印行。

*

w表示把行写入一个文件。

*

x表示互换模板块中的文本和缓冲区中的文本。

*

y表示把一个字符翻译为另外的字符(但是不用于正则表达式)


3. 选项

-e command, --expression=command

允许多台编辑。

-h, --help

打印帮助,并显示bug列表的地址。

-n, --quiet, --silent


取消默认输出。

-f, --filer=script-file

引导sed脚本文件名。

-V, --version

打印版本和版权信息。


4. 元字符集^

锚定行的开始 如:/^sed/匹配所有以sed开头的行。

$

锚定行的结束 如:/sed$/匹配所有以sed结尾的行。

.

匹配一个非换行符的字符 如:/s.d/匹配s后接一个任意字符,然后是d。

*

匹配零或多个字符 如:/*sed/匹配所有模板是一个或多个空格后紧跟sed的行。

[]

匹配一个指定范围内的字符,如/[Ss]ed/匹配sed和Sed。

[^]

匹配一个不在指定范围内的字符,如:/[^A-RT-Z]ed/匹配不包含A-R和T-Z的一个字母开头,紧跟ed的行。

\(..\)

保存匹配的字符,如s/\(love\)able/\1rs,loveable被替换成lovers。

&

保存搜索字符用来替换其他字符,如s/love/**&**/,love这成**love**。

\<

锚定单词的开始,如:/\<love/匹配包含以love开头的单词的行。

\>

锚定单词的结束,如/love\>/匹配包含以love结尾的单词的行。

x\{m\}

重复字符x,m次,如:/0\{5\}/匹配包含5个o的行。

x\{m,\}

重复字符x,至少m次,如:/o\{5,\}/匹配至少有5个o的行。

x\{m,n\}

重复字符x,至少m次,不多于n次,如:/o\{5,10\}/匹配5--10个o的行。

6. 实例

删除:d命令

*

$ sed '2d' example-----删除example文件的第二行。

*

$ sed '2,$d' example-----删除example文件的第二行到末尾所有行。

*

$ sed '$d' example-----删除example文件的最后一行。

*

$ sed '/test/'d example-----删除example文件所有包含test的行。

替换:s命令

*

$ sed 's/test/mytest/g' example-----在整行范围内把test替换为mytest。如果没有g标记,则只有每行第一个匹配的test被替换成mytest。

*

$ sed -n 's/^test/mytest/p' example-----(-n)选项和p标志一起使用表示只打印那些发生替换的行。也就是说,如果某一行开头的test被替换成mytest,就打印它。

*

$ sed 's/^192.168.0.1/&localhost/' example-----&符号表示替换换字符串中被找到的部份。所有以192.168.0.1开头的行都会被替换成它自已加 localhost,变成192.168.0.1localhost。

*

$ sed -n 's/\(love\)able/\1rs/p' example-----love被标记为1,所有loveable会被替换成lovers,而且替换的行会被打印出来。

*

$ sed 's#10#100#g' example-----不论什么字符,紧跟着s命令的都被认为是新的分隔符,所以,“#”在这里是分隔符,代替了默认的“/”分隔符。表示把所有10替换成100。

选定行的范围:逗号

*

$ sed -n '/test/,/check/p' example-----所有在模板test和check所确定的范围内的行都被打印。

*

$ sed -n '5,/^test/p' example-----打印从第五行开始到第一个包含以test开始的行之间的所有行。

*

$ sed '/test/,/check/s/$/sed test/' example-----对于模板test和west之间的行,每行的末尾用字符串sed test替换。

多点编辑:e命令

*

$ sed -e '1,5d' -e 's/test/check/' example-----(-e)选项允许在同一行里执行多条命令。如例子所示,第一条命令删除1至5行,第二条命令用check替换test。命令的执 行顺序对结果有影响。如果两个命令都是替换命令,那么第一个替换命令将影响第二个替换命令的结果。

*

$ sed --expression='s/test/check/' --expression='/love/d' example-----一个比-e更好的命令是--expression。它能给sed表达式赋值。

从文件读入:r命令

*

$ sed '/test/r file' example-----file里的内容被读进来,显示在与test匹配的行后面,如果匹配多行,则file的内容将显示在所有匹配行的下面。

写入文件:w命令

*

$ sed -n '/test/w file' example-----在example中所有包含test的行都被写入file里。

追加命令:a命令

*

$ sed '/^test/a\\--->this is a example' example<-----'this is a example'被追加到以test开头的行后面,sed要求命令a后面有一个反斜杠。

插入:i命令

$ sed '/test/i\\

new line

-------------------------' example

如果test被匹配,则把反斜杠后面的文本插入到匹配行的前面。

下一个:n命令

*

$ sed '/test/{ n; s/aa/bb/; }' example-----如果test被匹配,则移动到匹配行的下一行,替换这一行的aa,变为bb,并打印该行,然后继续。

变形:y命令

*

$ sed '1,10y/abcde/ABCDE/' example-----把1--10行内所有abcde转变为大写,注意,正则表达式元字符不能使用这个命令。

退出:q命令

*

$ sed '10q' example-----打印完第10行后,退出sed。

保持和获取:h命令和G命令

*

$ sed -e '/test/h' -e '$G example----- 在sed处理文件的时候,每一行都被保存在一个叫模式空间的临时缓冲区中,除非行被删除或者输出被取消,否则所有被处理的行都将 打印在屏幕上。接着模式 空间被清空,并存入新的一行等待处理。在这个例子里,匹配test的行被找到后,将存入模式空间,h命令将其复制并存入一个称为保 持缓存区的特殊缓冲区 内。第二条语句的意思是,当到达最后一行后,G命令取出保持缓冲区的行,然后把它放回模式空间中,且追加到现在已经存在于模式空间中 的行的末尾。在这个 例子中就是追加到最后一行。简单来说,任何包含test的行都被复制并追加到该文件的末尾。

保持和互换:h命令和x命令

*

$ sed -e '/test/h' -e '/check/x' example -----互换模式空间和保持缓冲区的内容。也就是把包含test与check的行互换。

6. 脚本

Sed脚本是一个sed的命令清单,启动Sed时以-f选项引导脚本文件名。Sed对于脚本中输入的命令非常挑剔,在命令的末尾不能有任何空白或文本,如果在一行中有多个命令,要用分号分隔。以#开头的行为注释行,且不能跨行。

sed真的可以大大提高我们的工作效率,下面就写了这样一行,好多文件都被替换了,真方便

sed 's/localhost/127.0.0.1/g' mysql_virtual_*.cf

发布时间: 9年前Linux107人已围观返回回到顶端

很赞哦! (1)

文章评论

  • 请先说点什么
    热门评论
    106人参与,0条评论

站点信息

  • 建站时间:2016-04-01
  • 文章统计:728条
  • 文章评论:82条
  • QQ群二维码:扫描二维码,互相交流