1、 萬用字元

萬用字元是shell在做PathnameExpansion時用到的。說白了一般只用於檔名匹配，它是由shell解析的，比如find，ls，cp，mv等。

1、1 Shell常見萬用字元：

1、2 shell Meta字元（元字元）

shell 除了有萬用字元之外，還有一系列自己的其他特殊字元。

1、3 轉義字元

有時候，我們想讓 萬用字元，或者元字元 變成普通字元，不需要使用它。那麼這裡我們就需要用到轉義符了。 shell提供轉義符有三種。

2、正則表示式

正則表示式是用來匹配字串的，針對檔案內容的文字過濾工具裡，大都用到正則表示式，如vi，grep，awk，sed等。

另外，這篇文章只針對Linux下的文字過濾工具的正則表示式進行討論，其他的一些程式語言，如C++（c regex,c++ regex,boost regex），java，python等都有自己的正則表示式庫。

簡單點來說，正則表示式是對一組正在處理的文字的描述。

例1：查詢檔案test中出現單詞hi，並且若干字元後出現單詞Jerry的行

$ grep -E"\<hi\>.+\<Jerry\>" test

ni hao hi nihao Jerrydsfds

例2：查詢檔案test中出現以hi開頭的單詞，並且若干字元後出現以Jerry結尾的單詞的行

grep -E "\<hi.+Jerry\>"test

ni hao hi nihao Jerrydsfds

wo buhao hiwuyanpingjfkjk Jerry

wo henhao hiwuyanJerry

在正則表示式的使用過程中，一些字元是以特定方式處理的。最常使用的特殊字元如下：

如果想將上述字元用作普通字元，就需要在它們前面加上\字元。例如，如果想使用$字元，你需要將它寫為\$

在方括號中還可以使用一些有用的特殊匹配模式，如下：

另外，如果指定了用於擴充套件的-E選項，那些用於控制匹配完成的其他字元可能會遵循正則表示式的規則，對於grep命令，我們還需要在這些字元前面加上\,下表是擴充套件部分一覽：

3、萬用字元和正則表示式比較

（1）萬用字元和正則表示式看起來有點像，不能混淆。可以簡單的理解為萬用字元只有*,?,[],{}這4種，而正則表示式複雜多了。

（2）*在萬用字元和正則表示式中有其不一樣的地方，在萬用字元中*可以匹配任意的0個或多個字元，而在正則表示式中他是重複之前的一個或者多個字元，不能獨立使用的。比如萬用字元可以用*來匹配任意字元，而正則表示式不行，他只匹配任意長度的前面的字元。

4、grep

引自：http://hi.baidu.com/hzslqt/blog/item/dbd0ea4e5145f819b3de05d6.html

1. grep簡介

    grep （global search regular expression(RE) and print out the line,全面搜尋正則表示式並把行打印出來）是一種強大的文字搜尋工具，它能使用正則表示式搜尋文字，並把匹配的行打印出來。Unix的grep家族包括grep、egrep和fgrep。egrep和fgrep的命令只跟grep有很小不同。egrep是grep的擴充套件，支援更多的re元字元， fgrep就是fixed grep或fast grep，它們把所有的字母都看作單詞，也就是說，正則表示式中的元字元表示回其自身的字面意義，不再特殊。linux使用GNU版本的grep。它功能更強，可以通過-G、-E、-F命令列選項來使用egrep和fgrep的功能。

    grep的工作方式是這樣的，它在一個或多個檔案中搜索字串模板。如果模板包括空格，則必須被引用，模板後的所有字串被看作檔名。搜尋的結果被送到螢幕，不影響原檔案內容。

    grep可用於shell指令碼，因為grep通過返回一個狀態值來說明搜尋的狀態，如果模板搜尋成功，則返回0，如果搜尋不成功，則返回1，如果搜尋的檔案不存在，則返回2。我們利用這些返回值就可進行一些自動化的文字處理工作。

2. grep正則表示式元字符集（基本集）

^       ：錨定行的開始 如：'^grep'匹配所有以grep開頭的行。

$        ：錨定行的結束 如：'grep$'匹配所有以grep結尾的行。

.       ：匹配一個非換行符的字元 如：'gr.p'匹配gr後接一個任意字元，然後是p。

*       ：匹配零個或多個先前字元 如：'*grep'匹配所有一個或多個空格後緊跟grep的行。 .*一起用代表任意字元。

[]       ：匹配一個指定範圍內的字元，如'[Gg]rep'匹配Grep和grep。

[^]      ：匹配一個不在指定範圍內的字元，如：'[^A-FH-Z]rep'匹配不包含A-R和T-Z的一個字母開頭，緊跟rep的行。

.. ：標記匹配字元，如'love'，love被標記為1。

\<      ：錨定單詞的開始，如:'\<grep'匹配包含以grep開頭的單詞的行。

\>       ：錨定單詞的結束，如'grep\>'匹配包含以grep結尾的單詞的行。

x\{m\}   ：重複字元x，m次，如：'o\{5\}'匹配包含5個o的行。

x\{m,\} ：重複字元x,至少m次，如：'o\{5,\}'匹配至少有5個o的行。

x\{m,n\} ：重複字元x，至少m次，不多於n次，如：'o\{5,10\}'匹配5-10個o的行。

\w       ：匹配文字和數字字元，也就是[A-Za-z0-9]，如：'G\w*p'匹配以G後跟零個或多個文字或數字字元，然後是p。

\W       ：\w的反置形式，匹配一個或多個非單詞字元，如點號句號等。

\b       ：單詞鎖定符，如: '\bgrepb\'只匹配grep。

3. 用於egrep和 grep -E的元字元擴充套件集

+       ：匹配一個或多個先前的字元。如：'[a-z]+able'，匹配一個或多個小寫字母后跟able的串，如loveable,enable,disable等。

?       ：匹配零個或多個先前的字元。如：'gr?p'匹配gr後跟一個或沒有字元，然後是p的行。

a|b|c    ：匹配a或b或c。如：grep|sed匹配grep或sed

()       ：分組符號，如：love(able|rs)ov+匹配loveable或lovers，匹配一個或多個ov。

x{m},x{m,},x{m,n} ：作用同x\{m\},x\{m,\},x\{m,n\}

5. Grep命令選項

   -a或--text   不要忽略二進位制的資料。

   -A   <顯示列數>或--after-context=<顯示列數>    除了顯示符合範本樣式的那一列之外，並顯示該列之後的內容。

   -b或--byte-offset    在顯示符合範本樣式的那一列之前，標示出該列第一個字元的位編號。

   -B<顯示列數>或--before-context=<顯示列數>    除了顯示符合範本樣式的那一列之外，並顯示該列之前的內容。

   -c或--count   計算符合範本樣式的列數。

   -C<顯示列數>或--context=<顯示列數>或-<顯示列數>    除了顯示符合範本樣式的那一列之外，並顯示該列之前後的內容。

   -d<進行動作>或--directories=<進行動作>    當指定要查詢的是目錄而非檔案時，必須使用這項引數，否則grep指令將回報資訊並停止動作。

   -e<範本樣式>或--regexp=<範本樣式>    指定字串做為查詢檔案內容的範本樣式。

   -E或--extended-regexp    將範本樣式為延伸的普通表示法來使用。

   -f<範本檔案>或--file=<範本檔案>    指定範本檔案，其內容含有一個或多個範本樣式，讓grep查詢符合範本條件的檔案內容，格式為每列一個範本樣式。

   -F或--fixed-regexp    將範本樣式視為固定字串的列表。

   -G或--basic-regexp    將範本樣式視為普通的表示法來使用。

   -h或--no-filename    在顯示符合範本樣式的那一列之前，不標示該列所屬的檔名稱。

   -H或--with-filename    在顯示符合範本樣式的那一列之前，表示該列所屬的檔名稱。

   -i或--ignore-case    忽略字元大小寫的差別。

   -l或--file-with-matches    列出檔案內容符合指定的範本樣式的檔名稱。

   -L或--files-without-match    列出檔案內容不符合指定的範本樣式的檔名稱。

   -n或--line-number    在顯示符合範本樣式的那一列之前，標示出該列的列數編號。

   -q或--quiet或--silent    不顯示任何資訊。

   -r或--recursive   此引數的效果和指定“-d recurse”引數相同。

   -s或--no-messages    不顯示錯誤資訊。

   -v或--revert-match    反轉查詢。

   -V或--version   顯示版本資訊。

   -w或--word-regexp    只顯示全字符合的列。

   -x或--line-regexp    只顯示全列符合的列。

   -y    此引數的效果和指定“-i”引數相同。

   --help    線上幫助。

6. 例項

    要用好grep這個工具，其實就是要寫好正則表示式，下面列幾個例子，講解正則表示式的寫法。

$ ls -l | grep '^a'

    通過管道過濾ls -l輸出的內容，只顯示以a開頭的行。

$ grep 'test' d*

    顯示所有以d開頭的檔案中包含test的行。

$ grep 'test' aa bb cc

    顯示在aa，bb，cc檔案中匹配test的行。

$ grep '[a-z]\{5\}' aa

    顯示所有包含每個字串至少有5個連續小寫字元的字串的行。

$ grep 'west.*\1' aa

    如果west被匹配，則es就被儲存到記憶體中，並標記為1，然後搜尋任意個字元（.*），這些字元後面緊跟著另外一個es（\1），找到就顯示該行。如果用egrep或grep -E，就不用"\"號進行轉義，直接寫成'w(es)t.*\1'就可以了。

    再講解一個具體應用的例子。

    查詢所有位於當前目錄下的.cs檔案中的Main，通過grep，可以輕鬆快速地完成這項任務，命令如下：

grep ‘Main’ *.cs

輸出結果為：

ChineseDemo.cs: publicstatic void Main()

RegDemo1.cs: static voidMain(string[] args)

RegDemo2.cs:   public static void Main()

RegDemo3.cs: publicstatic void Main()

    可見，通過grep真的可以找到相關目錄中符合條件的所有檔案，並能打印出查詢到的字串所位於的那行內容。如果只想確定哪些檔案含有Main，而不需列印相應行的內容，那麼可以使用以下命令：?

grep –l‘Main’ *.cs

輸出結果為：

ChineseDemo.cs

RegDemo1.cs

RegDemo2.cs

RegDemo3.cs

只有相應的檔名稱被顯示。

    在找到了含有Main字串的幾個檔案後，如果想粗略地檢視某一具體檔案的裡原始碼的相關資訊，比如檢視RegDemo1.cs檔案中含有Main這一行的前後三行，相關的命令如下：

grep –C 3 ‘Main’ RegDemo1.cs

輸出結果為：

class GroupingApp

{

   static void Main(string[] args)

    {

       Reg7();

}

輸出結果完全符合需求，static void Main(string[] args)這一行前後三行範圍內的所有程式碼被全部打印出來（第一行是空行）。

    以上的查詢字串沒有對查詢結果是否為一個完整的單詞進行限制，也就是說TheMain和Main_Func都會被認定為查詢目標。如果想限定該查詢字串為一個完整單詞，那麼可以使用\w引數，相關命令如下：

grep –w‘Main’ *.cs

結果為：

ChineseDemo.cs: publicstatic void Main()

RegDemo1.cs: static voidMain(string[] args)

RegDemo2.cs: publicstatic void Main()

RegDemo3.cs: publicstatic void Main()

另外舉例如下：

1）顯示/etc/passwd中的一位數或兩位數（錨定詞首、記尾、分組、轉義、次數匹配）

2）找出當前系統上使用者名稱和預設shell相同的使用者（行首、行尾錨定）（開始單詞和結束單詞一樣）

3）grep配合其它命令的用法，找出本機的IP地址，只顯示IP段（管道、cut）

[[email protected] ~]# ifconfig eth0 | grep "inet addr:" | cut -d:-f2 | cut -d' ' -f1

192.168.1.102

參考：

4、Linux程式設計第四版