1. 程式人生 > 實用技巧 >如何併發執行Linux命令

如何併發執行Linux命令

序列是按照順序一條接著一條的執行命令,與序列相對的是多條命令同時執行,稱做並行

用途

在bash指令碼中,併發執行命令的用途很多,比如:批量上傳和下載,批量啟動和關閉程式,批量打包日誌,批量檢查遠端機器是否可達等等

並行執行能充分利用系統資源,極大的提高效率,節省大量的時間

例如:現需要下載20個檔案,假設每個檔案下載時間需要1分鐘

序列下載是一個檔案下載完之後再下載另一個檔案,這樣20個檔案就需要20分鐘才能下載完

並行下載是啟動20個程序,20個程序同時下載,每個程序負責下載一個檔案,這樣20個檔案理論上只需要1分鐘左右就能全部下載完

序列和並行

在命令後面加上 & 符號就表示這條命令會在子程序中執行,下面是比較序列和並行的兩個例項

c.sh指令碼

#!/bin/bash
func_a()
{
  echo "func_a..$1.."
  sleep 1
}

for n in $(seq 1 5);
do
  func_a $n
done

echo "c.sh..finish.."

執行 time ./c.sh,結果如下

[root@ecs-centos-7 mult]# time ./c.sh 
func_a..1..
func_a..2..
func_a..3..
func_a..4..
func_a..5..
c.sh..finish..

real    0m5.008s
user    0m0.005s
sys     0m0.003s

上面的例子,連續呼叫5次 func_a函式,每次呼叫都會睡眠1秒,,只有等上一次呼叫結束了才能進行下一次呼叫,所以5次呼叫總共花費了5秒鐘

修改 c.sh指令碼,內容如下

#!/bin/bash
func_a()
{
  echo "func_a..$1.."
  sleep 1
}

for n in $(seq 1 5);
do
  func_a $n &
done
wait
echo "c.sh..finish.."

再次執行 time ./c.sh,結果如下

[root@ecs-centos-7 mult]# time ./c.sh 
func_a..1..
func_a..3..
func_a..2..
func_a..4..
func_a..5..
c.sh..finish..

real    0m1.006s
user    0m0.004s
sys     0m0.005s

修改之後的指令碼在迴圈體內 func_a $n 語句後面加了 & 符號,表示後在子程序中執行 func_a $n命令

迴圈結束後面有一個 wait 語句,表示等待前面迴圈體裡的子程序全部結束才會執行後面的命令

由於子程序不會阻塞當前程序,所以當前程序可以繼續執行下一次呼叫,所以5次呼叫總共只花費了1秒左右

在執行 time ./c.sh命令期間,開啟另一個終端輸入ps aux | grep c.sh 回車,輸出如下

[root@ecs-centos-7 ~]# ps aux | grep c.sh
root     29086  0.0  0.0 113188  1400 pts/1    S+   22:55   0:00 /bin/bash ./c.sh
root     29088  0.0  0.0 113188   628 pts/1    S+   22:55   0:00 /bin/bash ./c.sh
root     29089  0.0  0.0 113188   628 pts/1    S+   22:55   0:00 /bin/bash ./c.sh
root     29090  0.0  0.0 113188   628 pts/1    S+   22:55   0:00 /bin/bash ./c.sh
root     29091  0.0  0.0 113188   628 pts/1    S+   22:55   0:00 /bin/bash ./c.sh
root     29093  0.0  0.0 113188   628 pts/1    S+   22:55   0:00 /bin/bash ./c.sh
root     29099  0.0  0.0 112728   972 pts/2    S+   22:55   0:00 grep --color=auto c.sh

從上面的輸出可以看到,同時有6個c.sh指令碼程序,其中5個是5次迴圈產生的子程序,剩下1個是執行c.sh指令碼本身的程序

檢查主機是否可達

當有許多遠端主機的需要管理的時候,經常會對這些主機做一些檢查,而批量檢查主機是否可達是常見的操作,下面簡單介紹下如何利用併發執行快速檢查主機是否可達

假如有 host.txt 檔案,裡面儲存的是主機的IP地址,具體內容如下

[root@ecs-centos-7 mult]# cat host.txt
192.168.0.1
192.168.0.2
192.168.0.3
192.168.0.4
192.168.0.5
192.168.0.6
192.168.0.7
192.168.0.8
192.168.0.9

c.sh指令碼,內容如下

#!/bin/bash

ping_test()
{
  ping $1 -c 2 -W 3 &>/dev/null
  if [ $? -eq 0 ]; then
      echo "$1 reachable..."
  else
      echo "$1 unreachable..."
  fi
}

for n in $(cat host.txt);
do
   ping_test $n &
done

wait

echo "c.sh..finish.."

執行 time ./c.sh,結果如下

[root@ecs-centos-7 mult]# time ./c.sh 
192.168.0.1 reachable...
192.168.0.9 reachable...
192.168.0.4 unreachable...
192.168.0.3 unreachable...
192.168.0.6 unreachable...
192.168.0.2 unreachable...
192.168.0.8 unreachable...
192.168.0.7 unreachable...
192.168.0.5 unreachable...
c.sh..finish..

real    0m3.010s
user    0m0.014s
sys     0m0.011s

指令碼中 ping $1 -c 2 -w 3 語句是ping遠端主機的命令, -c 2 表示傳送資料包的次數 ,-W 3 是把超時時間設定為 3 秒

從檢測結果可以看出,192.168.0.1 192.168.0.9主機是可達的,其他主機都是不可達,總共花費了3秒左右