本文處理三劍客之sed的使用
什么是sed?
Stream EDitor(簡稱sed), 行編輯器，一次只讀一行，只處理一行，不對源文件做處理，至輸出到屏幕上。
sed是一種流編輯器，它一次處理一行內容。處理時，把當前處理的行存儲在臨時緩沖區中，稱為“模式空間”（pattern space），接著用sed命令處理緩沖區中的內容，處理完成后，把緩沖區的內容送往屏幕。接著處理下一行，這樣不斷重復，直到文件末尾。文件內容并沒有改變，除非你使用重定向存儲輸出。sed主要用來自動編輯一個或多個文件,簡化對文件的反復操作,編寫轉換程序等。
sed命令格式
sed[option]… 'script' inputfile…
常用選項：
-n：靜默模式，不輸出模式空間內的內容；默認打印空間模式的內容
-e: 'script' -e 'script' :指定多個編輯指令
-f /PATH/TO/SCRIPT_FILE: 從指定文件中讀取編輯腳本
-r: 支持使用擴展正則表達式
-i: 直接編輯原文件
地址定界：
(1) 不給地址：對全文進行處理
(2) 單地址：
#: 指定的行
/pattern/：被此處模式所能夠匹配到的每一行
(3) 地址范圍：
#,# 例如：3,10 第三到第十行
#,+# 例如：3，+7 第三到第十行
/pat1/,/pat2/ 例如: /^root/,/^sync/ 從行首為root的行到行首為sync的行
#,/pat1/ 例如: 1,/^sync/ 從第一行到行首為sync的行
(4) ~：步進
1~2 奇數行 例如： 1~2p 顯示以1開始，步進為2的行，即13579奇數行
2~2 偶數行 例如： 222p 顯示以2開始，步進為2的行，即246819偶數行
編輯命令：
d: 刪除模式空間匹配的行
p: 顯示模式空間中的內容
a \text：在行后面追加文本；支持使用\n實現多行追加
i\text：在行前面插入文本；支持使用\n實現多行插入
c \text：替換行為單行或多行文本
w /path/to/somefile: 保存模式匹配的行至指定文件
r /path/from/somefile：讀取指定文件的文本至模式空間中匹配到的行后
=: 為模式空間中的行打印行號
!:模式空間中匹配行取反處理
s///：查找替換,支持使用其它分隔符，s@@@，s###
替換標記：
g: 行內全局替換
p: 顯示替換成功的行
w /PATH/TO/SOMEFILE：將替換成功的行保存至文件中
此命令有點難理解，請通過下面示例以及解釋了解此命令的用法
sed示例
（1）sed‘2p’ /etc/passwd
匹配/etc/passwd的第二行的數據到模式空間處理，（默認）然后再把數據打印在原來數據的下面一行
（2）sed –n ‘2p’ /etc/passwd
顯示匹配到/etc/passwd文件第二行的數據到模式空間，顯示經過模式空間處理過數據。
（3）sed –n ‘1,4p’ /etc/passwd
顯示匹配到/etc/passwd文件第1-4行的數據到模式空間，顯示經過模式空間處理過的1~4行數據。
（4）sed –n ‘/root/p’ /etc/passwd
顯示匹配到/etc/passwd文件里面含有root字符信息的行的數據到模式空間，顯示經過模式空間處理過的包括root信息的行的數據。
（5）sed–n ‘2,/root/p’ /etc/passwd從2行開始
顯示匹配到/etc/passwd里面第2行到第一個含有root字符信息的行的數據到模式空間，顯示經過模式空間處理過的從第2行到第一個含有root字符信息的行的數據。
（6）sed -n ‘/^$/=’ file
顯示匹配到文件里面空行的行的到模式空間，并且在模式空間里面顯示這些數據在文件里面的行號，然后把數據顯示出來。
（7）sed –n –e ‘/^$/p’ –e ‘/^$/=’ file
顯示匹配到文件里面空行的行的到模式空間，并且經過模式空間處理加上行號，然后把這些在模式空間處理過的數據打印在原數據的下面一行。
（8）sed‘/root/a\superman’ /etc/passwd
顯示匹配到/etc/passwd里面含有root字符的行信息到模式空間，追加一個superman的信息，并打印到原行的下一行。
（9）sed‘/root/i\superman’ /etc/passwd
顯示匹配到/etc/passwd里面含有root字符的行信息到模式空間，追加一個superman的信息，并打印到原行的上一行。
（10）sed‘/root/c\superman’ /etc/passwd
顯示匹配到/etc/passwd里面含有root字符的行信息到模式空間，并替換原行成信息為superman的行。
（11）sed‘/^$/d’ file
刪除空行
（12）sed‘1,10d’ file
匹配文件的1-10行，并且刪除
（13）nl /etc/passwd| sed‘2,5d’
匹配文件的2-5行，并且刪除
（14）nl /etc/passwd| sed‘2a tea’
在第二行后面加上tea
（15）sed 's/root/testroot/g' /etc/passwd
查找全文把所有的root改成testroot
（16）sed–n‘s/root/&superman/p’ /etc/passwd
查找root字符的信息，再root后面加上superman的字符，且只顯示經過模式空間處理的信息。
（17）sed –n‘s/root/superman&/p’ /etc/passwd
查找root字符的信息，再root前面加上superman的字符，且只顯示經過模式空間處理的信息。
（18）sed -e ‘s/dog/cat/’ -e ‘s/hi/lo/’ pets
查找每行第一個dog的字符改成cat,和查找每行第一個hi字符的信息改成lo。
（19）sed –i.bak ‘s/dog/cat/g’ pets
查找全文的dog改成cat,并且修改文件和做原文件的備份。
經過以上的示例，如果都看明白了，相信大家應該都大概了解sed的工作原理了，跟grep有點類似，但是有些地方跟grep不一樣，例如sed有一個模式空間，還有一個保持空間（下面說），且sed可以直接修改原文件并且對原文件做備份等等功能，都可以看出來sed功能的強大。
sed命令不單只有以上那些功能，還有一些更加高級的功能，和另外一個空間，叫做保持空間。
sed高級編輯命令：
h: 把模式空間中的內容覆蓋至保持空間中
H：把模式空間中的內容追加至保持空間中
g: 從保持空間取出數據覆蓋至模式空間
G：從保持空間取出內容追加至模式空間
x: 把模式空間中的內容與保持空間中的內容進行互換
n: 讀取匹配到的行的下一行覆蓋至模式空間
N：追加匹配到的行的下一行至模式空間
d: 刪除模式空間中的行
D：刪除當前模式空間開端至\n的內容（不在傳至標準輸出），放棄之后的命令，但是對剩余模式空間重新執行sed
sed高級編輯示例：
（1）sed -n 'n;p' FILE
一:匹配1，因為n的作用，匹配1的下一行，即第二行的2，把2覆蓋到模式空間，然后打印，即122
二:因為第二行已經匹配過，現在就到匹配第三行3，因為n的作用，匹配第四行4，即122344
如此重復，直到重復所有的行。
（2）sed '1!G;h;$!d' FILE
一.匹配第一行數據，因為1！，所以G不執行，然后執行h,把模式空間的1覆蓋到保持空間，由于第一行不是最后一行，所以把模式空間的數據刪除。
二.匹配第二行數據，因為2，所以G執行,把保持空間的1追加到模式空間，此時模式空間有兩行，2行和1行，然后執行h,把模式空間的數據覆蓋到保持空間，所以保持空間有兩行，2行和1行，因為$!d,所以把模式空間的數據刪除，下面執行第三行數據。
三.匹配第三行數據，因為3，所以G執行,把保持空間的2行和1行追加到模式空間，此時模式空間有三行，3行、2行和1行，然后執行h,把模式空間的數據覆蓋到保持空間，所以保持空間有三行，3行、2行和1行，因為$!d,所以把模式空間的數據刪除，下面執行第四行數據。
四.按照上面的步驟,一直執行到第十行，此時保持空間為10、9、8、7、6、5、4、3、2、1。因為是第十行，最后一行，所以$!d執行，把模式空間里面的數據刪除，然后把保持空間的數據輸出到屏幕，如下面所示。
（3）sed '$!N;$!D' FILE
（4）sed '$!d' FILE
一.分析題目的意思，$!意思，$是最后一行的意思，!是“非”的意思，$!,即不是最后一行
二.d是刪除的意思，$!d,即不是最后一行就刪掉。所以最后的結果是10
（5）sed ‘G’ FILE
一.G的意思：從保持空間取出內容追加至模式空間。
二.默認保持空間是空的，那么就一個G的意思，就是把保持空間的空行追加至模式空間，此時模式空間里面就會存在一個1的行和一個空行。那么匹配完第一行再輸出結果的時候，即第一行1，第二行空行。
三.按照第二個步驟重復操作到最后一下，結果如下。
（6）sed ‘g’ FILE
一.g的意思：從保持空間取出數據覆蓋至模式空間
二.默認保持空間是空的，那么就一個g的意思，就是把保持空間的空行追加至模式空間，此時模式空間里面本來存在一個1的行，此行會被覆蓋掉。然后再把結果輸出到屏幕，即把空行輸出到屏幕。
三.如此重復匹配到最后一行，一共10行，最后結果即10個空行。
（7）sed ‘/^$/d;G’ FILE
一.^$是空行的意思，d是刪除，G是追加保持空間的數據到模式空間
二.開始匹配，^$/d 意思，把所有空行都刪掉了，此時文檔就剩下10行，即1到10的行（此文檔本來沒有空行，大家可以想象為假如該文件本身存在很多空行）。然后G的作用下，把保持空間的數據“空行”追加到模式空間。
三.如此匹配到最后一行，結果如下。
（8）sed 'n;d' FILE
一.n匹配第一行的下一行，即偶數行；d是刪除的意思
二，n;d的意思。刪除偶數行，然后輸出，結果如下。
（9）sed -n '1!G;h;$p' FILE
一.匹配第一行，因為1,所以G不執行，執行h,把1行從模式空間覆蓋到保持空間，此時保持空間為1行，執行$p，因為不符合$p(即最后一行才打印)，所以不執行，因為-n,所以模式空間編輯過的數據不輸出，下面匹配第二行。
二.匹配第二行，因為2,執行G,把保持空間的1行追加到模式空間，此時模式空間的數據為2行，1行。執行h,把模式空間的數據覆蓋到保持空間，此時保持空間的數據為2行，1行。執行$p，不符合條件，跳過，因為-n,所以模式空間編輯過的數據不輸出。匹配下一行數據。
三.匹配第三行，因為3,執行G,把保持空間的2行和1行追加到模式空間，此時模式空間的數據為3行、2行、1行。執行h,把模式空間的數據覆蓋到保持空間，此時保持空間的數據為3行，2行，1行。執行$p，不符合條件，跳過，因為-n,所以模式空間編輯過的數據不輸出。匹配下一行數據。
四.按照上面的步驟,一直執行到第十行，此時保持空間為10、9、8、7、6、5、4、3、2、1。因為是第十行，最后一行，所以$p執行，然后把保持空間的數據輸出到屏幕，因為-n,所以模式空間編輯過的數據不輸出，最后如下面所示。
文本編輯利器之vim的使用
什么是vim?
Vim是一個類似于Vi的著名的功能強大、高度可定制的文本編輯器，在Vi的基礎上改進和增加了很多特性。
vim的使用方法
打開文件的正確方式
# vim [OPTION]… FILE…
+#: 打開文件后，直接讓光標處于第#行的行首
+/PATTERN：打開文件后，直接讓光標處于第一個被PATTERN匹配到的行的行首
vim + file 直接打開file,光標在最后一行
vim –b file 二進制方式打開文件
vim –d file1 file2… 比較多個文件
vim -m file 只讀打開文件
ex file 或vim –e 直接進入ex模式
如果該文件存在，文件被打開并顯示內容
如果該文件不存在，當編輯后第一次存盤時創建它
vim編輯器的多種命令模式
主要模式：
命令模式（默認）：移動光標，剪切/粘貼文本
插入（編輯）模式：修改文本
擴展命令模式：保存，退出等
可視化編輯模式：能實現在圖形界面下面操作，很方便
這里引用一下老師的圖：
模式之間的轉換
命令模式—-> 插入模式
i: insert, 在光標所在處輸入
I：在當前光標所在行的行首輸入
a: append, 在光標所在處后面輸入
A：在當前光標所在行的行尾輸入
o: 在當前光標所在行的下方打開一個新行
O：在當前光標所在行的上方打開一個新行
插入模式—-> 命令模式
鍵盤左上角按ESC
命令模式—-> 擴展模式
shift加:（冒號）
擴展模式—-> 命令模式
鍵盤左上角按ESC
鎖定和解鎖:CTRL+s,Ctrl+q
注意，當鎖定的時候，只是屏幕被鎖定，當在鍵盤上面輸入的時候，屏幕不會有顯示，但是后臺還是有在輸入數據，當解鎖屏幕的時候，就能看見剛操作的內容。
關閉文件的正確方式
擴展模式：
:q 退出
:q! 強制退出，丟棄做出的修改
:wq保存退出
:x 保存退出
命令模式
ZZ: 保存退出
ZQ：不保存退出
擴展模式操作方法
按“:”進入Ex模式
創建一個命令提示符:,處于底部的屏幕左側
命令：
w 寫（存）磁盤文件
wq 寫入并退出
x 寫入并退出
q 退出
q！ 不存盤退出，即使更改都將丟失
r filename 讀文件內容到當前文件中
w filename 將當前文件內容寫入另一個文件
!command
r!command
命令模式光標跳轉的方法
字符間跳轉：
h: 左 j: 下 k: 上 l: 右
鍵盤← ↓ ↑ →
#COMMAND：跳轉由#指定的個數的字符；
EX.當前光標位置往右邊跳轉10個字符：按鍵盤: 10l
單詞間跳轉：
w：下一個單詞的詞首
e：當前或下一單詞的詞尾
b：當前或前一個單詞的詞首
#COMMAND：由#指定一次跳轉的單詞數
EX.當前光標位置跳到右邊第三個單詞詞首：按鍵盤：3w
當前頁跳轉：
H：頁首
M：頁中間行
L: 頁底
行首行尾跳轉：
^: 跳轉至行首的第一個非空白字符；
0: 跳轉至行首
$: 跳轉至行尾
行間移動：
#G、擴展模式：# ：跳轉至由#指定行
EX.從當前光標行數起向下跳轉至第100行，按鍵盤：100G
G：最后一行
1G, gg: 第一行
句間移動：
)：下一句(：上一句
段落間移動：
}:下一段{：上一段
命令模式翻屏操作
Ctrl+f: 向文件尾部翻一屏
Ctrl+b: 向文件首部翻一屏
Ctrl+d: 向文件尾部翻半屏
Ctrl+u：向文件首部翻半屏
字符編輯：
x: 刪除光標處的字符；
#x: 刪除光標處起始的#個字符
EX.刪除光標處起始的10個個字符：按鍵盤:10x
xp: 交換光標所在處的字符及其后面字符的位置
shift+~:轉換大小寫
刪除命令：
d： 刪除命令，可結合光標跳轉字符，實現范圍刪除；
d$：刪除到行尾
d^：刪除到非空行首
d0：刪除到行首
dw：向行尾方向刪除當前光標除的單個符號或者整個單詞
de：向詞尾方向刪除同類型的符號，如果是單詞前面有符號的話一并刪除
db：向行首方向刪除當前光標除的單個符號或者整個單詞
#COMMAND
dd：刪除光標所在的行
#dd：多行刪除
EX.刪除當前光標向下數起的3行：按鍵盤:3dd
D：從當前光標位置一直刪除到行尾，留空行，等同于d$
復制命令(y, yank)：
y: 復制，行為相似于d命令
y$：復制到行尾
y0：復制到行首
y^：復制到非空行首
ye：向詞尾方向復制同類型的符號，如果是單詞前面有符號的話一并復制
yw：向行尾方向復制當前光標除的單個符號或者整個單詞
yb：向行首方向復制當前光標除的單個符號或者整個單詞
#COMMAND
yy：復制行
#yy: 復制多行
EX.復制兩行:按鍵盤：2yy
Y: 復制整行，等同于yy
粘貼命令(p, paste)：
p：緩沖區存的如果為整行，則粘貼當前光標所在行的下方；否則，則粘貼至當前光標所在處的后面
P：緩沖區存的如果為整行，則粘貼當前光標所在行的上方；否則，則粘貼至當前光標所在處的前面
改變命令(c, change)
c: 修改后切換成插入模式
命令模式–> 插入模式
c$：修改到行尾
c^：修改到非空行首
c0：修改到行首
cb：向行首方向修改當前光標除的單個符號或者整個單詞
ce：向詞尾方向修改同類型的符號，如果是單詞前面有符號的話一并復制
w：向行尾方向修改當前光標除的單個符號或者整個單詞
#COMMAND
cc：刪除當前行并輸入新內容
#cc:
C：刪除當前光標到行尾，并切換成插入模式
100iwang [ESC] 粘貼“wang”100次
<start position><command><end position>
Command:
y 復制、d 刪除、gU變大寫、gu變小寫
例如0y$ 命令意味著：
0 →先到行頭
y →從這里開始拷貝
$ →拷貝到本行最后一個字符
ye 從當前位置拷貝到本單詞的最后一個字符
撤消更改
u撤銷最近的更改
#u撤銷之前多次更改
U撤消光標落在這行后所有此行的更改
按Ctrl-r重做最后的“撤消”更改
. 重復前一個操作
n.重復前一個操作n次
擴展模式：地址定界（此部分內容跟sed用法相似）
地址定界
:start_pos,end_pos
#: 具體第#行，例如2表示第2行；
#,#: 從左側#表示行起始，到右側#表示行結尾
#,+#: 從左側#表示的行起始，加上右側#表示的行數
：2,+3 表示2到5行
.: 當前行
$: 最后一行
.,$-1 當前行到倒數第二行
%：全文, 相當于1,$
/part1/,/part2/
從第一次被part1模式匹配到的行開始，一直到第一次被part2匹配到的行結束
#,/part/
/part/,$
使用方式：后跟一個編輯命令
d ：刪除內容
y ：復制內容
w file: 將范圍內的行另存至指定文件中
r file：在指定位置插入指定文件中的所有內容
查找（跟less命令操作相同）
/PATTERN：從當前光標所在處向文件尾部查找
?PATTERN：從當前光標所在處向文件首部查找
n：與命令同方向
N：與命令反方向
s: 在擴展模式下完成查找替換操作
格式：s/要查找的內容/替換為的內容/修飾符
要查找的內容：可使用模式
替換為的內容：不能使用模式，但可以使用\1, \2, …等后向引用符號；還可以使用“&”引用前面查找時查找到的整個內容
修飾符：
i: 忽略大小寫
g: 全局替換；默認情況下，每一行只替換第一次出現
gc:全局替換，每次替換前詢問
查找替換中的分隔符/可替換為其它字符，例如,@@@,###
s@/etc@/var@g
s#/boot#/#i
EX.修改全文的PATH為HELLO,然后搜索全文的HELLO操作。
vim的寄存器
有26個命名寄存器和1個無命名寄存器，常存放不同的剪貼版內容，可以不同會話間共享。
用a，b,…,z表示,用“寄存器表示，放在數字和命令之間
如：3"tyy 表示復制3行到t寄存器中
"tp 表示將t寄存器內容粘貼
未指定，將使用無命名寄存器
有10個數字寄存器，用0，1，…，9表示，0存放最近復制內容，1存放最近刪除內容。當新的文本變更和刪除時，1轉存到2，2轉存到3，以此類推。數字寄存器不能在不同會話間共享。
編輯二進制文件
以二進制方式打開文件
vim –b binaryfile
擴展命令模式下，利用xxd命令轉換為可讀的十六進制
:%!xxd
編輯二進制文件
擴展命令模式下，利用xxd命令轉換回二進制
:%!xxd –r
保存退出
EX.查看2進制文件，默認一堆亂碼
在擴展命令模式下面輸入:%!xxd，如果需要切回去上圖的狀態，輸入戶%!xxd -r
可視化模式
允許選擇的文本塊
v面向字符
V面向行
ctrl-v 面向塊
可視化鍵可用于與移動鍵結合使用：
w，），}，箭頭等
突出顯示的文字可以被刪除，復制，變更，過濾，搜索/替換等
多文件編輯模式
vim FILE1 FILE2 FILE3 …
:next 下一個
:prev前一個
:first 第一個
:last 最后一個
:wall 保存所有
:qall退出所有
:wqall
使用多個“窗口”
多文件分割
vim -o|-O FILE1 FILE2 …
-o: 水平分割
-O: 垂直分割
在窗口間切換：Ctrl+w, Arrow
單文件窗口分割：
Ctrl+w,s: split, 水平分割
Ctrl+w,v: vertical, 垂直分割
ctrl+w,q：取消相鄰窗口
ctrl+w,o:取消全部窗口
：wqall退出
EX.多窗口編輯模式示例
定制vim的工作特性
配置文件：永久有效
全局：/etc/vimrc
個人：~/.vimrc
擴展模式：當前vim進程有效
(1) 行號
顯示：set number, 簡寫為set nu
取消顯示：set nonumber, 簡寫為set nonu
(2) 括號成對匹配
匹配：set showmatch, 簡寫為set sm
取消：set nosm
(3) 自動縮進
啟用：set ai
禁用：set noai
(4) 高亮搜索
啟用：set hlsearch
禁用：set nohlsearch
(5) 語法高亮
啟用：syntax on
禁用：syntax off
(6) 忽略字符的大小寫
啟用：set ic
不忽略：set noic
(7) 文件格式
啟用：fileformat=unix
不忽略：fileformat=dos
(8) 設置文本寬度
:set textwidth=65 (vimonly)
:set wrapmargin=15
:help option-list
:setor:set all
vi/vim內置幫助
:help
:helptopic
Use:qto exit help
要熟練vim編輯器，不是一天一夕能夠完成的事，要熟練vim各種常用的命令和功能模塊，還需要大家多多練習。
作業
1、如何設置tab縮進為4個字符？
2、復制/etc/rc.d/init.d/functions文件至/tmp目錄；替換/tmp/functions文件中的/etc/sysconfig/init為/var/log；
3、刪除/tmp/functions文件中所有以#開頭，且#后面至少有一個空白字符的行的行首的#號；
原創文章，作者：~微風~，如若轉載，請注明出處：http://www.www58058.com/33020
