導(dǎo)入大批量的數(shù)據(jù),在阿里云服務(wù)器上寫了一個shell腳本來執(zhí)行,本人MAC終端連接服務(wù)器,但是突然公司斷網(wǎng)了。我在終端看到shell腳本終止了,輸出了結(jié)束標(biāo)識符。但是本人不知道腳本再斷網(wǎng)之前就結(jié)束了還是斷網(wǎng)的時候結(jié)束的???而且,斷網(wǎng)對腳本運行有影響嗎?
TD;TR: 多年Linux服務(wù)器運維經(jīng)驗的老司機告訴你,會有影響,所以長時間運行并且不允許中斷的腳本你應(yīng)該放在screen
/tmux
這一類虛擬終端執(zhí)行,幫你hold住session不中斷。
但并不意味著ssh斷開你運行的腳本一定會崩潰,我們假定你的腳本通常都是單線程同步運行的命令行
#!/bin/bash -e
command1
command2
command3
那么在Linux上用ps -efx
命令看你的進程樹大致是這個樣子的:
sshd
\_ -bash
\_ bash -e /path/to/your_script.sh
\_ command1
如果此時強行斷開ssh連接(比如你強行關(guān)閉終端窗口,或者網(wǎng)絡(luò)斷開),那么你的ssh通道會broken pipe
,于是系統(tǒng)會收到SIGHUP
信號,干掉你的sshd fork出來的bash進程。于是你的command1
就變成孤兒進程了。這個套路是不是有點眼熟?沒錯就是殺死僵尸進程的方法,那么command1將會被init
進程(pid為1的進程)托管。如果你的子進程開啟了NOSIGHUP
,是不會被SIGHUP信號干掉的,直接變成init進程的子進程繼續(xù)運行。所以此時你再次登錄ssh會發(fā)現(xiàn)command1已經(jīng)變成了init的子進程,像這樣:
init
\_ command1
如果你的command1沒有開啟NO_SIGHUP,那么是不會看到這個情況的,bash被干掉,下面的command1也將被干掉,并且不會再執(zhí)行command2,command3
當(dāng)然session已經(jīng)丟失,你也無法看到command1的stdout和stderr了。這時候你發(fā)現(xiàn)由于bash已經(jīng)被干掉,所以在command1執(zhí)行完畢之后,command2;command3自然無法執(zhí)行了。這就可能會對你的邏輯造成比較嚴(yán)重的影響——你的腳本執(zhí)行步驟并未完成,并且如果你的腳本不是冪等,也將難以重試或繼續(xù)。
因此,對于長時間運行并且不允許中斷的腳本,你應(yīng)該使用screen
/tmux
托管。
另:不一定所有的進程都會默認(rèn)開啟忽略SIGHUP信號,因此大多數(shù)進程對于SIGHUP信號的響應(yīng)是直接退出
北大青鳥APTECH成立于1999年。依托北京大學(xué)優(yōu)質(zhì)雄厚的教育資源和背景,秉承“教育改變生活”的發(fā)展理念,致力于培養(yǎng)中國IT技能型緊缺人才,是大數(shù)據(jù)專業(yè)的國家
北大青鳥中博軟件學(xué)院創(chuàng)立于2003年,作為華東區(qū)著名互聯(lián)網(wǎng)學(xué)院和江蘇省首批服務(wù)外包人才培訓(xùn)基地,中博成功培育了近30000名軟件工程師走向高薪崗位,合作企業(yè)超4
中公教育集團創(chuàng)建于1999年,經(jīng)過二十年潛心發(fā)展,已由一家北大畢業(yè)生自主創(chuàng)業(yè)的信息技術(shù)與教育服務(wù)機構(gòu),發(fā)展為教育服務(wù)業(yè)的綜合性企業(yè)集團,成為集合面授教學(xué)培訓(xùn)、網(wǎng)
達(dá)內(nèi)教育集團成立于2002年,是一家由留學(xué)海歸創(chuàng)辦的高端職業(yè)教育培訓(xùn)機構(gòu),是中國一站式人才培養(yǎng)平臺、一站式人才輸送平臺。2014年4月3日在美國成功上市,融資1
曾工作于聯(lián)想擔(dān)任系統(tǒng)開發(fā)工程師,曾在博彥科技股份有限公司擔(dān)任項目經(jīng)理從事移動互聯(lián)網(wǎng)管理及研發(fā)工作,曾創(chuàng)辦藍(lán)懿科技有限責(zé)任公司從事總經(jīng)理職務(wù)負(fù)責(zé)iOS教學(xué)及管理工作。
浪潮集團項目經(jīng)理。精通Java與.NET 技術(shù), 熟練的跨平臺面向?qū)ο箝_發(fā)經(jīng)驗,技術(shù)功底深厚。 授課風(fēng)格 授課風(fēng)格清新自然、條理清晰、主次分明、重點難點突出、引人入勝。
精通HTML5和CSS3;Javascript及主流js庫,具有快速界面開發(fā)的能力,對瀏覽器兼容性、前端性能優(yōu)化等有深入理解。精通網(wǎng)頁制作和網(wǎng)頁游戲開發(fā)。
具有10 年的Java 企業(yè)應(yīng)用開發(fā)經(jīng)驗。曾經(jīng)歷任德國Software AG 技術(shù)顧問,美國Dachieve 系統(tǒng)架構(gòu)師,美國AngelEngineers Inc. 系統(tǒng)架構(gòu)師。