shell腳本多線程實現(xiàn)
在使用shell 腳本時,碰到了順序執(zhí)行太慢的情況,因此考慮使用多線程方式,以提高效率。
具體做法是使用 &+wait 達到多線程的效果,下面請看對比。
順序執(zhí)行
執(zhí)行3次沒次等待4秒,共計耗時12秒
代碼:
#/bin/bash
date
for num in seq 1 3
do
{
echo "sleep 4"
sleep 4
}
done
date
結(jié)果:
2019年 11月 20日 星期三 09:40:56 CST
sleep 4
sleep 4
sleep 4
2019年 11月 20日 星期三 09:41:08 CST
seq 1 3
根據(jù)觀察可以發(fā)現(xiàn)&+wait形式會讓循環(huán)體內(nèi)的命令全部進入后臺運行,這樣當處理大量事務時會有問題,所以可以根據(jù)以下幾種方式實現(xiàn)控制每次開啟的線程數(shù)量
多層for 循環(huán)
共計9次,發(fā)3個線程,等待4秒,共計耗時12秒
代碼:
#/bin/bash
date
for num2 in seq 1 3
do
{
for num in seq 1 3
do
{
echo "sleep 4"
sleep 4
}&
done
wait
}
done
date
結(jié)果:
2019年 11月 20日 星期三 09:47:23 CST
sleep 4
sleep 4
sleep 4
sleep 4
sleep 4
sleep 4
sleep 4
sleep 4
sleep 4
2019年 11月 20日 星期三 09:47:35 CST
all_num=9
thread_num=3
date
seq 1 ${all_num} | xargs -n 1 -I {} -P ${thread_num} sh -c "sleep 4;echo {}"
date
結(jié)果:
2019年 11月 20日 星期三 09:51:03 CST
1
3
2
4
5
6
8
9
7
2019年 11月 20日 星期三 09:51:15 CST
以上就是我總結(jié)的shell 并行方式。還有使用GNU parallel命令實現(xiàn)并發(fā)的方式,因為測試環(huán)境沒有改命令,故沒做測試,待測試環(huán)境有之后會補全。
另外有需要云服務器可以了解下創(chuàng)新互聯(lián)cdcxhl.cn,海內(nèi)外云服務器15元起步,三天無理由+7*72小時售后在線,公司持有idc許可證,提供“云服務器、裸金屬服務器、高防服務器、香港服務器、美國服務器、虛擬主機、免備案服務器”等云主機租用服務以及企業(yè)上云的綜合解決方案,具有“安全穩(wěn)定、簡單易用、服務可用性高、性價比高”等特點與優(yōu)勢,專為企業(yè)上云打造定制,能夠滿足用戶豐富、多元化的應用場景需求。