Shell是什么?
shell本身是一個(gè)命令解釋器,介于操作系統(tǒng)的內(nèi)核(kernel)態(tài)和用戶態(tài)之間,可以執(zhí)行系統(tǒng)調(diào)用及系統(tǒng)命令等,讓用戶以此來與操作系統(tǒng)實(shí)現(xiàn)互動(dòng)。同時(shí),它也用來指一種計(jì)算機(jī)程序語(yǔ)言(類似于C、Python等)。一個(gè)shell程序一般被稱為一個(gè)腳本。
Shell語(yǔ)言的流派
目前,shell主要有兩大流派:
- sh:
- burne shell (sh)
- burne again shell (bash)
- csh:
- c shell (csh)
- tc shell (tcsh)
- korn shell (ksh)
目前,大部分Linux系統(tǒng)預(yù)設(shè)的shell都是bash。
Ubuntu16.04提供的shell環(huán)境(登錄成功后默認(rèn)使用bash):
slot@slot-ubt:~$ cat /etc/shells
# /etc/shells: valid login shells
/bin/sh
/bin/dash
/bin/bash
/bin/rbash
slot@slot-ubt:~$
Mac OS提供的shell環(huán)境:
$ cat /etc/shells
# List of acceptable shells for chpass(1).
# Ftpd will not allow users to connect who are not using
# one of these shells.
>
/bin/bash
/bin/csh
/bin/ksh
/bin/sh
/bin/tcsh
/bin/zsh # zsh系本文作者自己安裝
一個(gè)極簡(jiǎn)的bash demo: hello_world.sh
#!/bin/bash
# Here is comment
echo "Hello World!"
執(zhí)行
方法1: 直接使用bash解釋器來解釋執(zhí)行:
bash hello_world.sh
或者:
sh hello_world.sh
方法2: 先將文件屬性改為可執(zhí)行狀態(tài):
chmod +x hello_world.sh
或者:
chmod 777 hello_world.sh
再直接執(zhí)行:
./hello_world.sh
輸出
Hello World!
解釋
#!用來指定執(zhí)行該腳本的解釋器,后面的/bin/bash表明指定/bin目錄下的bash程序來解釋執(zhí)行該腳本文件。
#開頭的是注釋行(#!除外),shell中只有單行注釋。
echo "Hello World!" 即用echo命令輸出字符串"Hello World!"到終端顯示器。
補(bǔ)充知識(shí): 文件的屬性
通過ls -l命令可以查看文件的屬性,例如查看新建文件test.sh的屬性:
slot@slot-ubt:~$ touch test.sh
slot@slot-ubt:~$ ls -l test.sh
-rw-rw-r-- 1 slot slot 0 12月 21 15:40 test.sh
可以看到,一般新建文件的默認(rèn)屬性是
-rw-rw-r--,即644,不具有可執(zhí)行屬性x,可使用chmod命令來改變文件屬性(修改默認(rèn)屬性則使用umask命令),例如將文件test.sh的屬性改為可讀可寫可執(zhí)行(rwx: 4 + 2 + 1 = 7):
slot@slot-ubt:~$ chmod 777 test.sh
slot@slot-ubt:~$ ls -l test.sh
-rwxrwxrwx 1 slot slot 0 12月 21 15:40 test.sh
Bash中的變量
變量的定義與賦值
不像C、Java等靜態(tài)語(yǔ)言需要先聲明然后才能使用,而是和Python等動(dòng)態(tài)語(yǔ)言類似,Bash變量在使用時(shí)直接定義,例如:
my_bash_var="this is my bash var"
注意:
-
=兩邊不能有空格!否則就是語(yǔ)法錯(cuò)誤了。 - Bash變量命名只能使用字母,下劃線和數(shù)字,并且不能以數(shù)字開頭。
變量的引用
使用已定義的變量時(shí),只要在變量名前面加$符號(hào)即可:
echo $my_bash_var
或者使用${var_name}的形式,{}是可選的,主要是幫助解釋器更好地識(shí)別變量的邊界(推薦):
echo ${my_bash_var}
注意''和""的區(qū)別:
-
'':?jiǎn)我?hào)里的任何字符都會(huì)原樣輸出,單引號(hào)中對(duì)變量引用是無效的,且單引號(hào)中不能出現(xiàn)單引號(hào)(對(duì)單引號(hào)使用轉(zhuǎn)義符也不行); -
"":雙引號(hào)里可以引用變量,可以出現(xiàn)轉(zhuǎn)義字符。
實(shí)例:
a="hello"
echo 'a is : $a'
echo "a is : $a"
Output:
a is : $a
a is : hello
只讀變量
使用 readonly 命令可以將變量限定為只讀變量,這與 C 語(yǔ)言中的 const 常量類型的情況相同.
a_var="hello"
readonly a_var
a_var="world" # Output: bash: read-only variable: a_var
刪除變量
使用 unset 命令可以刪除變量,但是不能刪除只讀變量。
變量被刪除后不能再次使用。
my_var="haha"
unset my_var
echo ${my_var} # 變量my_var已被刪除,沒有任何輸出
變量的類型
諸如C、Java、Python等這些高級(jí)語(yǔ)言中的變量是有類型的,例如數(shù)字類型(整型、浮點(diǎn)型等)、字符串類型、布爾類型,面向?qū)ο笳Z(yǔ)言中還有引用類型等。但是,在Bash中,并不對(duì)變量區(qū)分類型。
本質(zhì)上來說,Bash變量都是字符串。但是依賴于上下文,Bash也允許比較操作和算術(shù)操作。決定這些的關(guān)鍵因素是變量中的值是否只有數(shù)字,只有當(dāng)變量是純數(shù)字時(shí),該變量才是“數(shù)字類型的”,否則就是字符串類型的。
另外,注意Bash中的數(shù)字默認(rèn)的是十進(jìn)制,八進(jìn)制需要以0開頭,十六進(jìn)制以0x開頭。
純數(shù)字變量是“數(shù)字變量”:
a=1234
let "a+=1"
echo ${a} # Output: 1235
數(shù)字+字符串:字符串變量,字符串變量不能進(jìn)行數(shù)學(xué)運(yùn)算
b=${a/12/BB} # 將12替換為BB
echo $ # Output: BB35
let "b+=1"
echo $ # Output:1
將變量中的非數(shù)字字符替換為數(shù)字,得到數(shù)字變量
c=BB34
echo ${c} # Output: BB34
d=${c/BB/12} # 將BB替換為12
echo $u0z1t8os # Output: 1234
let "d+=1"
echo $u0z1t8os # Output: 1235
空變量+數(shù)字:數(shù)字變量
# 變量e定義為空值
e=""
echo ${e} # Output: 沒有任何輸出
let "e+=1" # 空值 + 1
echo ${e} # Output: 1
未定義的變量+數(shù)字:數(shù)字變量
# 變量f未定義
echo "f = $f" # Output: f =
let "f+=1"
echo "f = ${f}" # Output: f = 1
變量的作用域
- 局部變量(local variables):這種變量只有在變量所在的代碼塊或者函數(shù)中才可見,需要使用
local聲明; - 全局變量:Bash中用戶自定義的普通變量默認(rèn)是全局變量,可以在本文件中的其它位置引用;
- 環(huán)境變量(environmental variables):所有的程序(包括shell啟動(dòng)的程序)都能訪問環(huán)境變量。
如果一個(gè)shell腳本設(shè)置了環(huán)境變量,需要用 export 命令來通知腳本的環(huán)境。
更多關(guān)于環(huán)境變量的知識(shí)可以參考以下文章:
Bash中的運(yùn)算符
Bash支持的運(yùn)算符有:
- 數(shù)學(xué)運(yùn)算符
- 關(guān)系運(yùn)算符
- 布爾運(yùn)算符
- 邏輯運(yùn)算符
- 字符串運(yùn)算符
- 文件測(cè)試運(yùn)算符
數(shù)學(xué)運(yùn)算符
| 數(shù)學(xué)運(yùn)算符 | 說明 |
|---|---|
| + | 加法 |
| - | 減法 |
| * | 乘法 |
| / | 除法 |
| % | 取余 |
| = | 賦值 |
| == | 相等測(cè)試,相等則返回true |
| != | 不相等測(cè)試,不相等則返回true |
注意: 乘號(hào)*前邊必須加反斜杠 \ 才能實(shí)現(xiàn)乘法運(yùn)算
關(guān)系運(yùn)算符
關(guān)系運(yùn)算符只支持?jǐn)?shù)字,不支持字符串,除非字符串的值是數(shù)字
| 關(guān)系運(yùn)算符 | 說明 |
|---|---|
| -eq | (equal) 檢測(cè)兩個(gè)數(shù)是否相等,相等則返回 true |
| -ne | (not equal)檢測(cè)兩個(gè)數(shù)是否相等,不相等則返回 true |
| -gt | (greater than)檢測(cè)左邊的數(shù)是否大于右邊的,如果是,則返回 true |
| -lt | (lower than) 檢測(cè)左邊的數(shù)是否小于右邊的,如果是,則返回 true |
| -ge | (greater equal)檢測(cè)左邊的數(shù)是否大于等于右邊的,如果是,則返回 true |
| -le | (lower equal) 檢測(cè)左邊的數(shù)是否小于等于右邊的,如果是,則返回 true |
布爾運(yùn)算符
| 布爾運(yùn)算符 | 說明 |
|---|---|
| -a | 與運(yùn)算,兩個(gè)表達(dá)式都為 true 才返回 true |
| -o | 或運(yùn)算,有一個(gè)表達(dá)式為 true 則返回 true |
| ! | 非運(yùn)算,表達(dá)式為 true 則返回 false,否則返回 true |
邏輯運(yùn)算符
| 邏輯運(yùn)算符 | 說明 |
|---|---|
| && | 邏輯與 |
| II | 邏輯或 |
字符串運(yùn)算符
| 字符串運(yùn)算符 | 說明 | 舉例 (a="abc" b="def") |
|---|---|---|
| = | 檢測(cè)兩個(gè)字符串是否相等,相等返回 true | [ $a = $b ] 返回 false |
| != | 檢測(cè)兩個(gè)字符串是否相等,不相等返回 true | [ $a != $b ] 返回 true |
| -z | 檢測(cè)字符串長(zhǎng)度是否為0,為0返回 true | [ -z $a ] 返回 false |
| -n | 檢測(cè)字符串長(zhǎng)度是否為0,不為0返回 true | [ -n $a ] 返回 true |
| str_name | 檢測(cè)字符串是否為空,不為空返回 true | [ $a ] 返回 true |
文件測(cè)試運(yùn)算符
文件測(cè)試運(yùn)算符用于檢測(cè) Unix 文件的各種屬性
| 文件測(cè)試運(yùn)算符 | 說明 |
|---|---|
| -b file | 檢測(cè)文件是否是塊設(shè)備文件,如果是,則返回 true |
| -c file | 檢測(cè)文件是否是字符設(shè)備文件,如果是,則返回 true |
| -d file | 檢測(cè)文件是否是目錄,如果是,則返回 true |
| -f file | 檢測(cè)文件是否是普通文件(既不是目錄,也不是設(shè)備文件),如果是,則返回 true |
| -g file | 檢測(cè)文件是否設(shè)置了 SGID 位,如果是,則返回 true |
| -k file | 檢測(cè)文件是否設(shè)置了粘著位(Sticky Bit),如果是,則返回 true |
| -p fill | 檢測(cè)文件是否是命名管道,如果是,則返回 true |
| -u file | 檢測(cè)文件是否設(shè)置了 SUID 位,如果是,則返回 true |
| -r file | 檢測(cè)文件是否可讀,如果是,則返回 true |
| -w file | 檢測(cè)文件是否可寫,如果是,則返回 true |
| -x file | 檢測(cè)文件是否可執(zhí)行,如果是,則返回 true |
| -s file | 檢測(cè)文件是否為空(文件大小是否大于0),不為空返回 true |
| -e file | 檢測(cè)文件(包括目錄)是否存在,如果是,則返回 true |
Bash的控制流
條件語(yǔ)句
if語(yǔ)句
- if
if [ condition ]
then
command
fi
- if-else
if [ condition ]
then
command
else
command
fi
- if-elif-else
if [ condition1 ]
then
command1
elif [ condition2 ]
command2
else
commandN
fi
注意:
勿忘最后的fi(if的反向拼寫)!
case語(yǔ)句
case "${var}" in
"$condition1" )
command1
;;
"$condition2" )
command2
;;
* ) # 這里相當(dāng)于C中case語(yǔ)句的default
esac
注意:
- 對(duì)變量使用
""并不是強(qiáng)制的,因?yàn)椴粫?huì)發(fā)生單詞分離; - 每句測(cè)試行,都以右小括號(hào)
)結(jié)尾; - 每個(gè)條件塊都以兩個(gè)分號(hào)
;;結(jié)尾(作用類似C中的break); - case 塊的結(jié)束以
esac(case 的反向拼寫)結(jié)尾.
循環(huán)語(yǔ)句
for語(yǔ)句
for var in item1 item2 ... itemN
do
command1
command2
...
commandN
done
注意:
在循環(huán)的每次執(zhí)行中,var將順序的存取 list (i.e. item1 ... itemN)中列出的變量。
C風(fēng)格的for循環(huán):
for (( EXP1; EXP2; EXP3 ))
do
command1
command2
command3
done
注意: (())中對(duì)變量的引用可以不加$
while語(yǔ)句
while [ condition ]
do
command
done
C風(fēng)格的while循環(huán):
while (( condition ))
do
command
done
注意: (())中對(duì)變量的引用同樣可以不加$
until語(yǔ)句
until [ condition-is-true ]
do
command
done
注意:
util結(jié)構(gòu)在循環(huán)的頂部判斷條件,并且如果條件一直為 false 那就一直循環(huán)下去,直到條件為真才結(jié)束循環(huán)(與 while 相反)。
Bash支持的編程模型
Bash只支持過程式的編程模型,不支持面向?qū)ο蠛秃瘮?shù)式等高級(jí)編程模型,更不支持對(duì)高級(jí)設(shè)計(jì)模式的實(shí)現(xiàn)。所以,如果要實(shí)現(xiàn)比較復(fù)雜的功能,還是使用Perl、Python或者Ruby等高級(jí)語(yǔ)言吧。
Bash的傳參機(jī)制
shell通過位置參數(shù)(positional parameters)來給腳本文件傳遞參數(shù),就是從命令行中傳進(jìn)來的參數(shù),$0, $1, $2, $3... 其中:
- $0 是該腳本文件的名字
- $1 是第一個(gè)參數(shù), $2 是第 2 個(gè)參數(shù)...
注意:
- $9 以后就需要大括號(hào)了,如 ${10}, ${11}, ${12}...
另外,還有幾個(gè)特殊字符用來處理參數(shù):
| 參數(shù)處理 | 說明 |
|---|---|
| $# | 傳遞到腳本的參數(shù)個(gè)數(shù) |
| $* | 以一個(gè)單字符串顯示所有向腳本傳遞的參數(shù)。 |
| $@ | 與$*相同,但是使用時(shí)加引號(hào),并在引號(hào)中返回每個(gè)參數(shù)。 |
| $$ | 腳本運(yùn)行的當(dāng)前進(jìn)程ID號(hào) |
| $! | 后臺(tái)運(yùn)行的最后一個(gè)進(jìn)程的ID號(hào) |
| $- | 顯示Shell使用的當(dāng)前選項(xiàng),與set命令功能相同 |
| $? | 顯示最后命令的退出狀態(tài)。0表示沒有錯(cuò)誤,其他任何值表明有錯(cuò)誤。 |
$* 與 $@ 區(qū)別:
- 相同點(diǎn):都表示引用所有的位置參數(shù);
- 不同點(diǎn):只有在雙引號(hào)中體現(xiàn)出來。假設(shè)在腳本運(yùn)行時(shí)寫了三個(gè)參數(shù) 1、2、3,,則 " * " 等價(jià)于 "1 2 3"(傳遞了一個(gè)參數(shù)),而 "@" 等價(jià)于 "1" "2" "3"(傳遞了三個(gè)參數(shù))。
Bash函數(shù)
函數(shù)的定義
function func_name()
{
# 函數(shù)體
}
注意:
- 關(guān)鍵字function是可選的;
- 函數(shù)定義必須在第一次調(diào)用前完成,shell沒有像 C 中的函數(shù)“聲明”;
- 在一個(gè)函數(shù)內(nèi)嵌套另一個(gè)函數(shù)也是可以的,但是不常用.
函數(shù)的參數(shù)傳遞
函數(shù)以位置來引用傳遞過來的參數(shù)(就好像他們是位置參數(shù)一樣), 例如$1, $2, ...
函數(shù)的調(diào)用
函數(shù)被調(diào)用或被觸發(fā), 只需要簡(jiǎn)單地用函數(shù)名來調(diào)用,有參數(shù)的話將參數(shù)依次置于函數(shù)名之后。
無參函數(shù)的調(diào)用
function func1()
{
echo "Hello World!"
echo "This is func1"
}
# Calling func1
func1
輸出:
Hello World!
This is func1
有參函數(shù)的調(diào)用
function func2()
{
echo "This is func2"
a=$1
b=$2
echo "a is : $a"
echo "b is : $b"
}
# Calling func2,and pass two parameters
func2 "aaa" "bbb"
輸出:
This is func2
a is : aaa
b is : bbb
函數(shù)中參數(shù)的作用域
在函數(shù)調(diào)用之前,所有在函數(shù)內(nèi)聲明且沒有明確聲明為 local 的變量都可在函數(shù)體外可見(默認(rèn)為全局變量)。
如果變量用local 來聲明,那么它只能在該變量聲明的代碼塊中可見。這個(gè)代碼塊就是局部"范圍"。在一個(gè)函數(shù)內(nèi),局部變量意味著只能在函數(shù)代碼塊內(nèi)它才有意義。
1 #!/bin/bash
2
3 func()
4 {
5 global_var="I am global_var difined in function func."
6 echo $global_var
7
8 local loc_var="I am local_var defined in function func"
9 echo $loc_var
10 }
11
12 func
13 echo
14 echo $global_var
15 echo $loc_var
16
17 exit
輸出:
I am global_var difined in function func.
I am local_var defined in function func
I am global_var difined in function func.
Bash數(shù)組
Bash 只支持一維數(shù)組,用圓括號(hào)()來表示,數(shù)組元素之間用"空格"符號(hào)來分割(不同于C、C++、Java等語(yǔ)言中用逗號(hào)分割)。
數(shù)組的定義與初始化
初始化時(shí)不需要指定數(shù)組的大小。和其它大部分語(yǔ)言一樣,bash數(shù)組元素的下標(biāo)從0開始。
初始化方式1:直接初始化
arr_name=(value1 value2 ... valueN)
初始化方式2: 用下標(biāo)初始化
arr_name[0]=value1
arr_name[1]=value2
arr_name[223]=value3 # 不連續(xù)初始化
注意:
- 數(shù)組成員不必一定要連續(xù),空缺元素是允許的;
- 數(shù)組的一部分成員允許不被初始化, 沒有被初始化的元素將打印空(NULL)值;
訪問數(shù)組元素
訪問數(shù)組元素的一般格式:
${arr_name[index]}
遍歷數(shù)組
使用* 或@ 可以獲取數(shù)組中的所有元素
實(shí)例:
my_arr=(A B C "ddd")
# 遍歷數(shù)組格式1
echo "my_arr: ${my_arr[*]}
# 遍歷數(shù)組格式2
echo "my_arr: ${my_arr[@]}
輸出:
my_arr: A B C ddd
my_arr: A B C ddd
獲取數(shù)組長(zhǎng)度
獲取數(shù)組長(zhǎng)度(即數(shù)組中的元素個(gè)數(shù)),和遍歷數(shù)組語(yǔ)法很相似,只是在數(shù)組名前加了#符號(hào),格式:
${#arr_name[*]}
或者
${#my_arr[@]}
實(shí)例:
# 獲取數(shù)組my_arr的長(zhǎng)度(元素個(gè)數(shù))
echo "my_arr length: ${#my_arr[*]}
# 獲取數(shù)組my_arr的長(zhǎng)度,
echo "my_arr length: ${#my_arr[@]}
輸出:
my_arr length: 4
my_arr length: 4
Bash字符串操作
在Bash中,字符串可以用單引號(hào),也可以用雙引號(hào),也可以不用引號(hào)。單雙引號(hào)的區(qū)別如前文所述。
定義字符串實(shí)例:
str1=hello
str2='hello'
str3="hello"
echo $str1
echo $str2
echo $str3
輸出:
hello
hello
hello
獲取字符串長(zhǎng)度
格式:
${#string_name}
實(shí)例:
my_str="hello world"
echo "my_str length: ${#my_str}
輸出:
my_str length: 11
字符串拼接
和Java Python等語(yǔ)言類似,bash允許直接將字符串拼接在一起以獲得新的字符串。
實(shí)例:
str1="hello"
str2="world"
str3=${str1}" "${str2}
echo ${str3}
輸出:
hello world
提取子串
| 表達(dá)式 | 含義 |
|---|---|
| ${string:position} | 在string中, 從位置position開始提取子串 |
| ${string:position:length} | 在string中, 從位置position開始提取長(zhǎng)度為length的子串 |
實(shí)例1:從位置1開始提取子串
str="hello world"
sub_str=${str:1}
echo "sub_str: ${sub_str}"
輸出:
sub_str: ello world
實(shí)例2:從位置1開始提取長(zhǎng)度為3的子串
str="hello world"
sub_str=${str:1:3}
echo "sub_str: ${sub_str}"
輸出:
sub_str: ell
刪除子串
| 表達(dá)式 | 含義 |
|---|---|
| ${string#substring} | 從string的開頭, 刪除最短匹配substring的子串 |
| ${string##substring} | 從string的開頭, 刪除最長(zhǎng)匹配substring的子串 |
| ${string%substring} | 從string的結(jié)尾, 刪除最短匹配substring的子串 |
| ${string%%substring} | 從string的結(jié)尾, 刪除最長(zhǎng)匹配substring的子串 |
記憶:
-
#表示從頭匹配,%表示從尾匹配 - 一個(gè)符號(hào)(
#或者%)表示最短匹配,兩個(gè)符號(hào)(##或者%%)表示最長(zhǎng)匹配
注意:substring可以是正則表達(dá)式。
實(shí)例:
str="abcabcdefabcabc"
# 從str的開頭,刪除最短匹配的以a開頭c結(jié)尾的子串
# 將刪除最左端的abc
# 輸出:abcdefabcabc
echo "${str#a*c}"
# 從str的開頭,刪除最長(zhǎng)匹配以a開頭b結(jié)尾的子串
# 將刪除abcabcdefabcab
# 輸出:c
echo "${str##a*b}"
# 從str的結(jié)尾,刪除最短匹配以a開頭c結(jié)尾的子串
# 將刪除最右端的abc
# 輸出:abcabcdefabc
echo "${str%a*c}"
# 從str的結(jié)尾,刪除最長(zhǎng)匹配以a開頭c結(jié)尾的子串
# 將刪除整個(gè)字符串
# 輸出:空
echo "${str%%a*b}"
替換子串
| 表達(dá)式 | 含義 |
|---|---|
| ${string/substring/replacement} | 使用$replacement 來代替第一個(gè)匹配的$substring |
| ${string//substring/replacement} | 使用$replacement 代替所有匹配的$substring |
| ${string/#substring/replacement} | 如果$string的前綴匹配$substring, 那么就用$replacement來代替匹配到的$substring |
| ${string/%substring/replacement} | 如果$string的后綴匹配$substring, 那么就用$replacement來代替匹配到的$substring |
實(shí)例:
str="abcdefabc"
# 用hello替換第一個(gè)abc
echo ${str/"abc"/"hello"} # 輸出:hellodefabc
# 用hello替換第一個(gè)abc
echo ${str//"abc"/"hello"} # 輸出:hellodefhello
# 前綴匹配替換
echo ${str/#"abc"/"world"} # 輸出:worlddefabc
# 后綴匹配替換
echo ${str/%"abc"/"world"} # 輸出:abcdefworld
References
Advanced Bash-Scripting Guide
這本書內(nèi)容翔實(shí),實(shí)例豐富,既可做精鉆細(xì)研的教材,又可作為手冊(cè)時(shí)時(shí)查閱,真是居家旅行必備良品;-)
另外,感興趣的同學(xué)也可翻閱《Linux Shell Scripting Cookbook》(中文譯名《Linux Shell腳本攻略》),里面介紹了很多Shell編程的奇技淫巧,甚是有用有趣。
推薦一個(gè)可以在線使用Linux環(huán)境的地方,如果需要Linux實(shí)驗(yàn)環(huán)境又不想搭虛擬機(jī)的話可以試試這里:實(shí)驗(yàn)樓