Linux Bash腳本進階教程學習

這里的技術技巧最初是來自谷歌的“Testing on the Toilet” (TOTT)。這里是一個修訂和擴增版本。

腳本安全

我的所有bash腳本都以下面幾句為開場白：

#!/bin/bashset -o nounsetset -o errexit

這樣做會避免兩種常見的問題：

引用未定義的變量(缺省值為“”)

執(zhí)行失敗的命令被忽略

需要注意的是，有些Linux命令的某些參數(shù)可以強制忽略發(fā)生的錯誤，例如“mkdir -p” 和 “rm -f”。

還要注意的是，在“errexit”模式下，雖然能有效的捕捉錯誤，但并不能捕捉全部失敗的命令，在某些情況下，一些失敗的命令是無法檢測到的。(更多細節(jié)請參考這個帖子。)

腳本函數(shù)

在bash里你可以定義函數(shù)，它們就跟其它命令一樣，可以隨意的使用；它們能讓你的腳本更具可讀性：

ExtractBashComments() { egrep "^#"}cat myscript.sh | ExtractBashComments | wccomments=$(ExtractBashComments < myscript.sh)

還有一些例子：

SumLines() { # iterating over stdin - similar to awk local sum=0 local line=”” while read line ; do sum=$((${sum} + ${line})) done echo ${sum}}SumLines < data_one_number_per_line.txtlog() { ?# classic logger ?local prefix="[$(date +%Y/%m/%d\ %H:%M:%S)]: " ?echo "${prefix} $@" >&2}log "INFO" "a message"

盡可能的把你的bash代碼移入到函數(shù)里，僅把全局變量、常量和對“main”調用的語句放在最外層。

變量注解

Bash里可以對變量進行有限的注解。最重要的兩個注解是：

local(函數(shù)內部變量)

readonly(只讀變量)

# a useful idiom: DEFAULT_VAL can be overwritten# with an environment variable of the same namereadonly DEFAULT_VAL=${DEFAULT_VAL:-7}myfunc() {# initialize a local variable with the global default local some_var=${DEFAULT_VAL} ...}

這樣，你可以將一個以前不是只讀變量的變量聲明成只讀變量：

x=5x=6readonly xx=7 # failure

盡量對你bash腳本里的所有變量使用local或readonly進行注解。

用$()代替反單引號(`)

反單引號很難看，在有些字體里跟正單引號很相似。$()能夠內嵌使用，而且避免了轉義符的麻煩。

# both commands below print out: A-B-C-Decho "A-`echo B-\`echo C-\\\`echo D\\\`\``"echo "A-$(echo B-$(echo C-$(echo D)))"

用[[]](雙層中括號)替代[]

使用[[]]能避免像異常的文件擴展名之類的問題，而且能帶來很多語法上的改進，而且還增加了很多新功能：

單中括號：

[ "${name}" \> "a" -o ${name} \< "m" ]

雙中括號

[[ "${name}" > "a" && "${name}" < "m" ?]]

正則表達式/Globbing

使用雙中括號帶來的好處用下面幾個例子最能表現(xiàn)：

t="abc123"[[ "$t" == abc* ]] # true (globbing比較)[[ "$t" == "abc*" ]] # false (字面比較)[[ "$t" =~ [abc]+[123]+ ]]# true (正則表達式比較)[[ "$t" =~ "abc*" ]] # false (字面比較)

注意，從bash 3.2版開始，正則表達式和globbing表達式都不能用引號包裹。如果你的表達式里有空格，你可以把它存儲到一個變量里：

r="a b+"[[ "a bbb" =~ $r ]] # true

按Globbing方式的字符串比較也可以用到case語句中：

case $t inabc*) ;;esac

字符串操作

Bash里有各種各樣操作字符串的方式，很多都是不可取的。

基本用戶

f="path1/path2/file.ext"len="${#f}" # = 20 (字符串長度)# 切片操作: ${:} or ${::}slice1="${f:6}"# = "path2/file.ext"slice2="${f:6:5}"# = "path2"slice3="${f: -8}"# = "file.ext"(注意："-"前有空格)pos=6len=5slice4="${f:${pos}:${len}}"# = "path2"

替換操作(使用globbing)

f="path1/path2/file.ext"single_subst="${f/path?/x}" # = "x/path2/file.ext"global_subst="${f//path?/x}" # = "x/x/file.ext"# 字符串拆分readonly DIR_SEP="/"array=(${f//${DIR_SEP}/ })second_dir="${arrray[1]}" # = path2

刪除頭部或尾部(使用globbing)

f="path1/path2/file.ext"# 刪除字符串頭部extension="${f#*.}" # = "ext"# 以貪婪匹配方式刪除字符串頭部filename="${f##*/}" # = "file.ext"# 刪除字符串尾部dirname="${f%/*}" # = "path1/path2"# 以貪婪匹配方式刪除字符串尾部root="${f%%/*}" # = "path1"

避免使用臨時文件

有些命令需要以文件名為參數(shù)，這樣一來就不能使用管道。這個時候?<()?就顯出用處了，它可以接受一個命令，并把它轉換成可以當成文件名之類的什么東西：

# 下載并比較兩個網頁diff <(wget -O - url1) <(wget -O - url2)

還有一個非常有用處的是”here documents”，它能讓你在標準輸入上輸入多行字符串。下面的’MARKER’可以替換成任何字詞。

# 任何字詞都可以當作分界符command << MARKER...${var}$(cmd)...MARKER

如果文本里沒有內嵌變量替換操作，你可以把第一個MARKER用單引號包起來：

command << 'MARKER'...no substitution is happening here.$ (dollar sign) is passed through verbatim....MARKER

內置變量

提示

使用$*很少是正確的選擇。

$@能夠處理空格參數(shù)，而且參數(shù)間的空格也能正確的處理。

使用$@時應該用雙引號括起來，像”$@”這樣。

調試

對腳本進行語法檢查：

bash -n myscript.sh

跟蹤腳本里每個命令的執(zhí)行：

bash -v myscripts.sh

跟蹤腳本里每個命令的執(zhí)行并附加擴充信息：

bash -x myscript.sh

你可以在腳本頭部使用set -o verbose和set -o xtrace來永久指定-v和-o。當在遠程機器上執(zhí)行腳本時，這樣做非常有用，用它來輸出遠程信息。

什么時候不應該使用bash腳本

你的腳本太長，多達幾百行

你需要比數(shù)組更復雜的數(shù)據結構

出現(xiàn)了復雜的轉義問題

有太多的字符串操作

不太需要調用其它程序和跟其它程序管道交互

擔心性能

這個時候，你應該考慮一種腳本語言，比如Python或Ruby。