shell四劍客之sed

概述

Stream EDitor, 行編輯器

sed是一種流編輯器，它一次處理一行內容。處理時，把 當前處理的行存儲在臨時緩沖區中，稱為“模式空間”（ pattern space），接著用sed命令處理緩沖區中的內容 ，處理完成后，把緩沖區的內容送往屏幕。接著處理下一 行，這樣不斷重復，直到文件末尾。文件內容并沒有改變 ，除非你使用重定向存儲輸出。Sed主要用來自動編輯一 個或多個文件,簡化對文件的反復操作,編寫轉換程序等

sed  三大功能 ： （1）查找符合條件的行   （2）編輯被匹配到的行并輸出到屏幕（最大的優點就是，輸出出來的不會破壞文件本身） （3） 替換（其實這也算編輯）

注意：-i參數有危險，請慎用！如果非得要用，請備份。

-r 支持拓展正則表達式，原理同grep

用法： sed [option]… 'script' inputfile…

常用選項：

-n：不輸出模式空間內容的自動打印

-e: 多點編輯 -f /PATH/TO/SCRIPT_FILE: 從指定文件中讀取編輯腳本

-r: 支持使用擴展正則表達式 -i: 原處編輯

script: '地址命令'

 地址定界：

(1) 不給地址：對全文進行處理

(2) 單地址： #: 指定的行 /pattern/：被此處模式所能夠匹配到的每一行

(3) 地址范圍： #,# #,+# /pat1/,/pat2/ #,/pat1/

(4) ~：步進 1~2 奇數行 2~2 偶數行

編輯命令：

d: 刪除模式空間匹配的行

p: 顯示模式空間中的內容 a \text：在行后面追加文本；支持使用\n實現多行追加

i \text：在行前面插入文本；支持使用\n實現多行插入

c \text：替換行為單行或多行文本

w /path/to/somefile: 保存模式匹配的行至指定文件

r /path/from/somefile：讀取指定文件的文本至模式空 間中匹配到的行后

=: 為模式空間中的行打印行號 !:模式空間中匹配行取反處理

s///：查找替換,支持使用其它分隔符，s@@@，s###

替換標記： g: 行內全局替換 p: 顯示替換成功的行 w /PATH/TO/SOMEFILE：將替換成功的行保存至文件中

（1） 查找符合條件的行

[root@centous1 ~]# sed '2p' /etc/passwd   ## p參數 顯示模式空間的內容這里直接加np，
root:x:0:0:root:/root:/bin/bash             被匹配的行是被重復出現的
bin:x:1:1:bin:/bin:/sbin/nologin                   
bin:x:1:1:bin:/bin:/sbin/nologin
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin

[root@centous1 ~]# sed -n '2p' /etc/passwd ##  這里前邊加-n參數， 只顯示被匹配到的行
bin:x:1:1:bin:/bin:/sbin/nologin

[root@centous1 ~]# sed -n '2,10p' /etc/passwd  ###通過行數可以指定要查看的行
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
uucp:x:10:14:uucp:/var/spool/uucp:/sbin/nologin

[root@centous1 ~]# sed -n '/root/p' /etc/passwd  #### 還可以通過關鍵詞
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin

[root@centous1 ~]# sed -n '2,/root/p' /etc/passwd  ####### 行數和關鍵詞的結合使用，來查找行
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
uucp:x:10:14:uucp:/var/spool/uucp:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin

[root@centous1 ~]# cat f1
1

2

3

4

5
[root@centous1 ~]# sed -n '/^$/=' f1    顯示空行號  ‘=’ 顯示行號
2
4
6
8

（2） 編輯匹配的行

a 在行后添加文本  i 在行前添加文本  c替換源文件文本 
[root@centous1 ~]# sed -e '/1/a\user1' -e '/2/i\user2' -e '/3/c\user3' f1 
1                 ## 特別說明，-e參數，多點編輯  
user1

user2
2

user3

4

5

[root@centous1 ~]# sed '/^$/d' f1  ###刪除空行  d  參數，刪除匹配到的行
1
2
3
4
5

[root@centous1 ~]# sed '/^$/d' f1 | sed '1,3d'  ### 可以指定刪除多少行
4
5

[root@centous1 ~]# cat f1 | sed '1a tea' #### 指定哪一行添加或者替換
1
tea

2

3

4

5

（3）替換

[root@centous1 ~]# cat f1
aaa
bbb
ccc
ddd
eee
fff
[root@centous1 ~]# sed 's/aaa/abc/g' f1 ## s參數的標志就是替換模式，其中三個'/'可以使其他的標 
abc                點符號（@@@或者###...等）g參數表示全局替換，           
bbb                  如果不加，就只替換第一個匹配到的。       
ccc
ddd
eee
fff

[root@centous1 ~]# sed -n 's/root/&supermen/p' /etc/passwd ##在替換的詞前邊加&，表示前邊被替換
rootsupermen:x:0:0:root:/root:/bin/bash              的還存在，只是在后邊添加
operator:x:11:0:operator:/rootsupermen:/sbin/nologin
  
[root@centous1 ~]# sed -n 's/root/supermen&/p' /etc/passwd  ## 同理在后邊添加&，表示前邊被替
supermenroot:x:0:0:root:/root:/bin/bash                 換的還存在，只是在前邊添加
operator:x:11:0:operator:/supermenroot:/sbin/nologin

然后我們來介紹一下危險的-i參數

-i：直接修改讀取的檔案內容，而不是由螢幕輸出。
如果對自己的命令操作十分自信，可以用他來編輯文件，但是也要確保安全，這時我們可以用以下方法，修改之前
做個備份
[root@centous1 ~]# cp /etc/passwd f1
[root@centous1 ~]# sed -i.bak 's/root/supermen/g' f1
[root@centous1 ~]# cat f1
supermen:x:0:0:supermen:/supermen:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
[root@centous1 ~]# ls -a
.                .bash_history  .cshrc  install.log         .pki    
..               .bash_logout   f1      install.log.syslog  .tcshrc    
123.sh           .bash_profile  f1.bak    

且用且珍惜

高級編輯命令：

h: 把模式空間中的內容覆蓋至保持空間中

H：把模式空間中的內容追加至保持空間中

g: 從保持空間取出數據覆蓋至模式空間

G：從保持空間取出內容追加至模式空間

x: 把模式空間中的內容與保持空間中的內容進行互換

n: 讀取匹配到的行的下一行覆蓋至模式空間

N：追加匹配到的行的下一行至模式空間

d: 刪除模式空間中的行

D：刪除當前模式空間開端至\n的內容（不在傳至標準輸 出），放棄之后的命令，但是對剩余模式空間重新執行sed

示例；

sed -n 'n;p' FILE

sed '1!G;h;$!d' FILE

sed '$!N;$!D' FILE

sed '$!d' FILE

sed ‘G’ FILE

sed ‘g’ FILE

sed ‘/^$/d;G’ FILE

sed 'n;d' FILE

sed -n '1!G;h;$p' FILE