Bash Shell初學者 —— 學習筆記
Tips1:【別坑同事】
每個重要、迴圈、需要人管的指令碼開頭必寫: set -euo pipefail
如果不去 set -euo pipefail
,指令碼中可能有指令失敗了,然而指令碼執行完畢之後仍然顯示成功。
除錯bash指令碼用set -x
,這樣每個指令開跑之前都會print出來再跑。
Tips2:【相對路徑】
cd "$(dirname "$0")"
這個命令寫在指令碼檔案裡才有作用,他返回這個指令碼檔案放置的目錄,並可以根據這個目錄來定位所要執行程式的相對位置(絕對位置除外)。
Tips3: 【冒號作用】 : ${HOSTNAME?} ${USER?} ${MAIL?} 這行的作用是,檢查這些環境變數是否已設定,沒有設定的將會以標準錯誤顯示錯誤訊息。像這種檢查如果使用類似 test 或 if這類的做法,基本上也可以處理,但都比不上上例的簡潔與效率。
Tips4:【>&2 】
把結果輸出到和標準錯誤一樣;之前如果有定義標準錯誤重定向到某file檔案,那麼標準輸出也重定向到這個file檔案。 其中&的意思,可以看成是“The same as”、“與...一樣”的意思
Tips5:【條件判斷中的引數】
[[ -x 某檔名字]]
- -d:檔案是否為目錄
- -e:檔案是否存在
- -x:檔案是否可以執行
- -f:檔案是否為常規檔案
- -r:檔案是否可讀
- -p:檔案是否為命名管道
- -b:檔案是否為塊裝置檔案
- -c:檔案是否為字元裝置檔案
Tips6: 【其它一些常用符號】
輸出/輸入重導向 > >> < << : > &> 2&> 2<>>& >&2 # 井號 (comments) 這幾乎是個滿場都有的符號,除了先前已經提過的"第一行" #!/bin/bash 井號也常出現在一行的開頭,或者位於完整指令之後,這類情況表示符號後面的是註解文字,不會被執行。 # This line is comments. echo "a = $a" # a = 0 由於這個特性,當臨時不想執行某行指令時,只需在該行開頭加上 # 就行了。這常用在撰寫過程中。 #echo "a = $a" # a = 0 如果被用在指令中,或者引號雙引號括住的話,或者在倒斜線的後面,那他就變成一般符號,不具上述的特殊功能。 ~ 帳戶的 home 目錄 算是個常見的符號,代表使用者的 home 目錄:cd ~;也可以直接在符號後加上某帳戶的名稱:cd ~user 或者當成是路徑的一部份:~/bin;~+ 當前的工作目錄,這個符號代表當前的工作目錄,她和內建指令 pwd 的作用是相同的。 # echo ~+/var/log~- 上次的工作目錄,這個符號代表上次的工作目錄。 # echo ~-/etc/httpd/logs ; 分號 (Command separator) 在 shell 中,擔任"連續指令"功能的符號就是"分號"。譬如以下的例子:cd ~/backup ; mkdir startup ; cp ~/.* startup/. ;; 連續分號 (Terminator) 專用在 case 的選項,擔任 Terminator 的角色。 case "$fop" inhelp) echo "Usage: Command -help -version filename" ;;version) echo "version 0.1" ;;esac . 逗號 (dot) 在 shell 中,使用者應該都清楚,一個 dot 代表當前目錄,兩個 dot 代表上層目錄。 CDPATH=.:~:/home:/home/web:/var:/usr/local 在上行 CDPATH 的設定中,等號後的 dot 代表的就是當前目錄的意思。 如果檔案名稱以 dot 開頭,該檔案就屬特殊檔案,用 ls 指令必須加上 -a 選項才會顯示。除此之外,在 regular expression 中,一個 dot 代表匹配一個字元。 'string' 單引號 (single quote) 被單引號用括住的內容,將被視為單一字串。在引號內的代表變數的$符號,沒有作用,也就是說,他被視為一般符號處理,防止任何變數替換。 heyyou=homeecho '$heyyou' # We get $heyyou "string" 雙引號 (double quote) 被雙引號用括住的內容,將被視為單一字串。它防止萬用字元擴充套件,但允許變數擴充套件。這點與單引數的處理方式不同。 heyyou=homeecho "$heyyou" # We get home `command` 倒引號 (backticks) 在前面的單雙引號,括住的是字串,但如果該字串是一列命令列,會怎樣?答案是不會執行。要處理這種情況,我們得用倒單引號來做。 fdv=`date +%F`echo "Today $fdv" 在倒引號內的 date +%F 會被視為指令,執行的結果會帶入 fdv 變數中。 , 逗點 (comma) 這個符號常運用在運算當中當做"區隔"用途。如下例 #!/bin/bashlet "t1 = ((a = 5 + 3, b = 7 - 1, c = 15 / 3))"echo "t1 = $t1, a = $a, b = $b" / 斜線 (forward slash) 在路徑表示時,代表目錄。 cd /etc/rc.dcd ../..cd / 通常單一的 / 代表 root 根目錄的意思;在四則運算中,代表除法的符號。 let "num1 = ((a = 10 / 2, b = 25 / 5))" \ 倒斜線 () 在互動模式下的escape 字元,有幾個作用;放在指令前,有取消 aliases 的作用;放在特殊符號前,則該特殊符號的作用消失;放在指令的最末端,表示指令連線下一行。 # type rmrm is aliased to `rm -i'# \rm ./*.log 上例,我在 rm 指令前加上 escape 字元,作用是暫時取消別名的功能,將 rm 指令還原。 # bkdir=/home# echo "Backup dir, \$bkdir = $bkdir"Backup dir, $bkdir = /home 上例 echo 內的 \$bkdir,escape 將 $ 變數的功能取消了,因此,會輸出 $bkdir,而第二個 $bkdir 則會輸出變數的內容 /home。 | 管道 (pipeline) pipeline 是 UNIX 系統,基礎且重要的觀念。連結上個指令的標準輸出,做為下個指令的標準輸入。 who | wc -l 善用這個觀念,對精簡 script 有相當的幫助。 ! 驚歎號(negate or reverse) 通常它代表反邏輯的作用,譬如條件偵測中,用 != 來代表"不等於" if [ "$?" != 0 ]thenecho "Executes error"exit 1fi 在規則表示式中她擔任 "反邏輯" 的角色 ls a[!0-9] 上例,代表顯示除了a0, a1 .... a9 這幾個檔案的其他檔案。 : 冒號 在 bash 中,這是一個內建指令:"什麼事都不幹",但返回狀態值 0。 : echo $? # 迴應為 0 : > f.
上面這一行,相當於cat/dev/null>f.上面這一行,相當於cat/dev/null>f.
。不僅寫法簡短了,而且執行效率也好上許多。
有時,也會出現以下這類的用法
: ${HOSTNAME?} ${USER?} ${MAIL?}
這行的作用是,檢查這些環境變數是否已設定,沒有設定的將會以標準錯誤顯示錯誤訊息。像這種檢查如果使用類似 test 或 if 這類的做法,基本上也可以處理,但都比不上上例的簡潔與效率。
除了上述之外,還有一個地方必須使用冒號
PATH=$PATH:$HOME/fbin:$HOME/fperl:/usr/local/mozilla
在使用者自己的HOME 目錄下的 .bash_profile 或任何功能相似的檔案中,設定關於"路徑"的場合中,我們都使用冒號,來做區隔。
? 問號 (wild card)
在檔名擴充套件(Filename expansion)上扮演的角色是匹配一個任意的字元,但不包含 null 字元。
# ls a?a1
善用她的特點,可以做比較精確的檔名匹配。
* 星號 (wild card)
相當常用的符號。在檔名擴充套件(Filename expansion)上,她用來代表任何字元,包含 null 字元。
# ls a*a a1 access_log
在運算時,它則代表 "乘法"。
let "fmult=2*3"
除了內建指令 let,還有一個關於運算的指令 expr,星號在這裡也擔任"乘法"的角色。不過在使用上得小心,他的前面必須加上escape 字元。
** 次方運算
兩個星號在運算時代表 "次方" 的意思。
let "sus=2**3"echo "sus = $sus" # sus = 8
$ 錢號(dollar sign)
變數替換(Variable Substitution)的代表符號。
vrs=123echo "vrs = $vrs" # vrs = 123
另外,在 Regular Expressions 裡被定義為 "行" 的最末端 (end-of-line)。這個常用在 grep、sed、awk 以及 vim(vi) 當中。
${} 變數的正規表示式
bash 對 ${} 定義了不少用法。以下是取自線上說明的表列
${parameter:-word} ${parameter:=word} ${parameter:?word} ${parameter:+word} ${parameter:offset} ${parameter:offset:length} ${!prefix*} ${#parameter} ${parameter#word} ${parameter##word} ${parameter%word} ${parameter%%word} ${parameter/pattern/string} ${parameter//pattern/string}
$*引用script 的執行引用變數,引用引數的演算法與一般指令相同,指令本身為0,其後為1,然後依此類推。引用變數的代表方式如下:
$0, $1, $2, $3, $4, $5, $6, $7, $8, $9, ${10}, ${11}.....
個位數的,可直接使用數字,但兩位數以上,則必須使用 {} 符號來括住。
$* 則是代表所有引用變數的符號。使用時,得視情況加上雙引號。
echo "$*"
還有一個與 $* 具有相同作用的符號,但效用與處理方式略為不同的符號。
由於程序的ID是唯一的,所以在同一個時間,不可能有重複性的PID。有時,script會需要產生臨時檔案,用來存放必要的資料。而此script亦有可能在同一時間被使用者們使用。在這種情況下,固定檔名在寫法上就顯的不可靠。唯有產生動態檔名,才能符合需要。符號由於程序的ID是唯一的,所以在同一個時間,不可能有重複性的PID。有時,script會需要產生臨時檔案,用來存放必要的資料。而此script亦有可能在同一時間被使用者們使用。在這種情況下,固定檔名在寫法上就顯的不可靠。唯有產生動態檔名,才能符合需要。符號
或許可以符合這種需求。它代表當前shell 的 PID。 echo "$HOSTNAME, $USER, $MAIL" > ftmp.$$ 使用它來作為檔名的一部份,可以避免在同一時間,產生相同檔名的覆蓋現象。 ps: 基本上,系統會回收執行完畢的 PID,然後再次依需要分配使用。所以 script 即使臨時檔案是使用動態檔名的寫法,如果 script 執行完畢後仍不加以清除,會產生其他問題。 () 指令群組 (command group) 用括號將一串連續指令括起來,這種用法對 shell 來說,稱為指令群組。如下面的例子:(cd ~ ; vcgh=`pwd` ; echo $vcgh),指令群組有一個特性,shell會以產生 subshell 來執行這組指令。因此,在其中所定義的變數,僅作用於指令群組本身。我們來看個例子 # cat ftmp-01#!/bin/basha=fsh(a=incg ; echo -e "\n $a \n")echo $a# ./ftmp-01incgfsh 除了上述的指令群組,括號也用在 array 變數的定義上;另外也應用在其他可能需要加上escape 字元才能使用的場合,如運算式。 (()) 這組符號的作用與 let 指令相似,用在算數運算上,是 bash 的內建功能。所以,在執行效率上會比使用 let 指令要好許多。 #!/bin/bash(( a = 10 ))echo -e "inital value, a = $a\n"(( a++ ))echo "after a++, a = $a" {} 大括號 (Block of code) 有時候 script 當中會出現,大括號中會夾著一段或幾段以"分號"做結尾的指令或變數設定。 # cat ftmp-02#!/bin/basha=fsh{a=inbc ; echo -e "\n $a \n"}echo $a# ./ftmp-02inbcinbc 這種用法與上面介紹的指令群組非常相似,但有個不同點,它在當前的 shell 執行,不會產生 subshell。 大括號也被運用在 "函式" 的功能上。廣義地說,單純只使用大括號時,作用就像是個沒有指定名稱的函式一般。因此,這樣寫 script 也是相當好的一件事。尤其對輸出輸入的重導向上,這個做法可精簡 script 的複雜度。 此外,大括號還有另一種用法,如下 {xx,yy,zz,...} 這種大括號的組合,常用在字串的組合上,來看個例子 mkdir {userA,userB,userC}-{home,bin,data} 我們得到 userA-home, userA-bin, userA-data, userB-home, userB-bin, userB-data, userC-home, userC-bin, userC-data,這幾個目錄。這組符號在適用性上相當廣泛。能加以善用的話,回報是精簡與效率。像下面的例子 chown root /usr/{ucb/{ex,edit},lib/{ex?.?*,how_ex}} 如果不是因為支援這種用法,我們得寫幾行重複幾次呀! [] 中括號 常出現在流程控制中,扮演括住判斷式的作用。if [ "$?" != 0 ]thenecho "Executes error"exit 1fi 這個符號在正則表示式中擔任類似 "範圍" 或 "集合" 的角色 rm -r 200[1234] 上例,代表刪除 2001, 2002, 2003, 2004 等目錄的意思。 [[]] 這組符號與先前的 [] 符號,基本上作用相同,但她允許在其中直接使用 || 與 && 邏輯等符號。 #!/bin/bashread akif [[ $ak > 5 || $ak < 9 ]]thenecho $akfi || 邏輯符號 這個會時常看到,代表 or 邏輯的符號。 && 邏輯符號 這個也會常看到,代表 and 邏輯的符號。 & 後臺工作 單一個& 符號,且放在完整指令列的最後端,即表示將該指令列放入後臺中工作。 tar cvfz data.tar.gz data > /dev/null & \<...\> 單字邊界 這組符號在規則表示式中,被定義為"邊界"的意思。譬如,當我們想找尋 the 這個單字時,如果我們用 grep the FileA 你將會發現,像 there 這類的單字,也會被當成是匹配的單字。因為 the 正巧是 there 的一部份。如果我們要必免這種情況,就得加上 "邊界" 的符號 grep '\' FileA + 加號 (plus) 在運算式中,她用來表示 "加法"。 expr 1 + 2 + 3 此外在規則表示式中,用來表示"很多個"的前面字元的意思。 # grep '10\+9' fileB109100910000910000931010009#這個符號在使用時,前面必須加上 escape 字元。 - 減號 (dash) 在運算式中,她用來表示 "減法"。 expr 10 - 2 此外也是系統指令的選項符號。 ls -expr 10 - 2 在 GNU 指令中,如果單獨使用 - 符號,不加任何該加的檔名稱時,代表"標準輸入"的意思。這是 GNU 指令的共通選項。譬如下例 tar xpvf - 這裡的 - 符號,既代表從標準輸入讀取資料。 不過,在 cd 指令中則比較特別 cd - 這代表變更工作目錄到"上一次"工作目錄。 % 除法 (Modulo) 在運算式中,用來表示 "除法"。 expr 10 % 2 此外,也被運用在關於變數的規則表示式當中的下列 ${parameter%word}${parameter%%word} 一個 % 表示最短的 word 匹配,兩個表示最長的 word 匹配。 = 等號 (Equals) 常在設定變數時看到的符號。 vara=123echo " vara = $vara" 或者像是 PATH 的設定,甚至應用在運算或判斷式等此類用途上。 == 等號 (Equals) 常在條件判斷式中看到,代表 "等於" 的意思。 if [ $vara == $varb ] ...下略 != 不等於 常在條件判斷式中看到,代表 "不等於" 的意思。 if [ $vara != $varb ] ...下略 ^ 這個符號在規則表示式中,代表行的 "開頭" 位置。
參考文獻: