linux關于grep 與 正則表達式的那些事

首先要記住的是: 正則表達式與通配符不一樣,它們表示的含義并不相同!
正則表達式只是一種表示法,只要工具支持這種表示法， 那么該工具就可以處理正則表達式的字符串。vim、grep、awk 、sed 都支持正則表達式，也正是因為由于它們支持正則，才顯得它們強
grep （縮寫來自Globally search a Regular Expression and Print）是一種強大的文本搜索工具，它能使用特定模式匹配（包括正則表達式）搜索文本，并默認輸出匹配行。
grep -[acinv] ‘搜索內容串’ filename
-a 以文本文件方式搜索
-c 計算找到的符合行的次數
-i 忽略大小寫? ? ? ?
-n 順便輸出行號
-v 反向選擇，即顯示不包含匹配文本的所有行
-l 查詢多文件時只輸出包含匹配字符的文件名。
-s 不顯示不存在或無匹配文本的錯誤信息。
grep命令加- E參數，這一擴展允許使用擴展模式匹配

grep正則表達式元字符集（基本集）
^ 錨定行的開始 如：’^grep’匹配所有以grep開頭的行。
$ 錨定行的結束 如：’grep$’匹配所有以grep結尾的行。
. 匹配一個非換行符的字符 如：’gr.p’匹配gr后接一個任意字符，然后是p。
* 匹配零個或多個先前字符 如：’*grep’匹配所有一個或多個空格后緊跟grep的行。
.*一起用代表任意字符。
[] 匹配一個指定范圍內的字符，如'[Gg]rep’匹配Grep和grep。
[^] 匹配一個不在指定范圍內的字符，如：'[^A-FH-Z]rep’匹配不包含A-R和T-Z的一個字母開頭，緊跟rep的行。
\(..\) 標記匹配字符，如’/(love/)’，love被標記為1。
\< 錨定單詞的開始，
\> 錨定單詞的結束，如’grep/>’匹配包含以grep結尾的單詞的行。
x\{m\} 重復字符x，m次，如：’o/{5/}’匹配包含5個o的行。 x/{m,/} 重復字符x,至少m次，如：’o/{5,/}’匹配至少有5個o的行。
x\{m,n\} 重復字符x，至少m次，不多于n次，如：’o/{5,10/}’匹配5–10個o的行。
w 匹配文字和數字字符，也就是[A-Za-z0-9_]，如：’G/w*p’匹配以G后跟零個或多個文字或數字字符，然后是p。
W w的反置形式，匹配一個或多個非單詞字符，如點號句號等。

POSIX字符類
括號內的表達式中，在“ [: ”和“ :] ”中所附的字符類的名稱：代表屬于該類的所有字符的列表。標準字符類名稱：

[:alnum:] – 字母數字字符。
[:alpha:] – 字母順序
[:blank:] – 空格和制表符。
[:digit:] – 數字： ‘0 1 2 3 4 5 6 7 8 9’。
[:lower:] – 小寫字母：‘a b c d e f ‘。
[:space:] – 特殊字符：制表符，換行符，垂直制表符、換頁，回車，和空間。
[:upper:] – 大寫字母：‘A B C D E F G H I J K L M N O P Q R S T U V W X Y Z’。

1
搜索有the的行,并輸出行號
grep -n ‘the’
搜索沒有the的行,并輸出行號
grep -nv ‘the’

2 利用[]搜索集合字符
[] 表示其中的某一個字符 ，例如[ade] 表示a或d或e
grep -n ‘t[ae]st’

可以用^符號做[]內的前綴，表示除[]內的字符之外的字符。
比如搜索oo前沒有g的字符串所在的行. 使用 ‘[^g]oo’ 作搜索字符串
grep -n ‘[^g]oo’
[] 內可以用范圍表示，比如[a-z] 表示小寫字母,[0-9] 表示0~9的數字, [A-Z] 則是大寫字母們。[a-zA-Z0-9]表示所有數字與英文字符。 當然也可以配合^來排除字符。
搜索包含數字的行
grep -n ‘[0-9]’
行首與行尾字符 ^ $. ^ 表示行的開頭，$表示行的結尾( 不是字符，是位置）那么‘^$’ 就表示空行,因為只有
行首和行尾。
這里^與[]里面使用的^意義不同。它表示^后面的串是在行的開頭。
比如搜索the在開頭的行
grep -n ‘^the’

搜索以小寫字母開頭的行
grep -n ‘^[a-z]’

搜索開頭不是英文字母的行
grep -n ‘^[^a-zA-Z]’

$表示它前面的串是在行的結尾，比如 ‘\.’ 表示 . 在一行的結尾
搜索末尾是.的行
grep -n ‘\.$’ . 是正則表達式的特殊符號，所以要用\轉義

‘^$’ 就表示只有行首行尾的空行拉！
搜索空行
grep -n ‘^$’

搜索非空行
grep -vn ‘^$’
任意一個字符. 與重復字符 *

在bash中*代表通配符，用來代表任意個字符，但是在正則表達式中，他含義不同，*表示有0個或多個 某個字符。
例如 oo*, 表示第一個o一定存在，第二個o可以有一個或多個，也可以沒有，因此代表至少一個o.

點. 代表一個任意字符，必須存在。 g??d 可以用 ‘g..d’ 表示。 good ,gxxd ,gabd …..都符合。
grep -n ‘g..d’

搜索兩個o以上的字符串
grep -n ‘ooo*’ 前兩個o一定存在，第三個o可沒有，也可有多個。

搜索g開頭和結尾的字符串在的行
grep -n ‘g.*g’ .*表示 0個或多個任意字符

限定連續重復字符的范圍 { }
. * 只能限制0個或多個， 如果要確切的限制字符重復數量，就用{范圍} 。范圍是數字用,隔開 2,5 表示2~5個,
2表示2個? ? ? ?2, 表示2到更多個
注意，由于{ }在SHELL中有特殊意義，因此作為正則表達式用的時候要用\轉義一下。

搜索包含兩個o的字符串的行。
grep -n ‘o\{2\}’
搜索g后面跟2~5個o,后面再跟一個g的字符串的行。
grep -n ‘go\{2,5\}g’

搜索包含g后面跟2個以上o,后面再跟g的行。。
grep -n ‘go\{2,\}g’ regular_express.txt
18:google is the best tools for search keyword.
19:goooooogle yes!

注意，讓[]中的^ － 不表現特殊意義，可以放在[]里面內容的后面。
‘[^a-z\.!^ -]’ 表示沒有小寫字母，沒有. 沒有!, 沒有空格，沒有- 的 串，注意[]里面有個小空格。

2擴展正則表達式

擴展正則表達式是對基礎正則表達式添加了幾個特殊構成的。
它令某些操作更加方便。
比如我們要去除 空白行和行首為 #的行， 會這樣用：
grep -v ‘^$’ FILE | grep -v ‘^#’

然而使用支持擴展正則表達式的 egrep 與擴展特殊符號 | ，會方便許多。
注意grep只支持基礎表達式， 而egrep 支持擴展的，其實 egrep 是 grep -E 的別名而已。因此grep -E 支持擴展正則。
那么:
egrep -v ‘^$|^#’

這里| 表示或的關系。 即滿足 ^$ 或者 ^# 的字符串。

這里列出幾個擴展特殊符號：
＋，于 . * 作用類似，表示 一個或多個重復字符。
?， 于 . * 作用類似，表示0個或一個字符。
｜，表示或關系，比如 ‘gd|good|dog’ 表示有gd,good或dog的串
（），將部分內容合成一個單元組。比如 要搜索 glad 或 good 可以這樣 ‘g(la|oo)d’
()的好處是可以對小組使用 + ? * 等。
比如要搜索A和C開頭結尾，中間有至少一個(xyz) 的串，可以這樣 : ‘A(xyz)+C’