shell腳本基礎(chǔ)應(yīng)用

Shell 教程
linux只用于運(yùn)行和查看猎莲,具體的數(shù)據(jù)查找和處理通過shell腳本程序進(jìn)行。不會(huì)直接使用linux處理數(shù)據(jù)单雾。可以定義shell腳本是linux命令的結(jié)合

一坚冀、定義(簡略看)

Shell 是一個(gè)用 C 語言編寫的程序谆刨,它是用戶使用 Linux 的橋梁。Shell 既是一種命令語言纹坐,又是一種程序設(shè)計(jì)語言枝冀。
Shell 是指一種應(yīng)用程序,這個(gè)應(yīng)用程序提供了一個(gè)界面耘子,用戶通過這個(gè)界面訪問操作系統(tǒng)內(nèi)核的服務(wù)果漾。

Shell 腳本
Shell 腳本(shell script),是一種為 shell 編寫的腳本程序谷誓。
業(yè)界所說的 shell 通常都是指 shell 腳本绒障,但shell 和 shell script 是兩個(gè)不同的概念。

二捍歪、shell環(huán)境(簡略看)

Shell 編程跟 JavaScript户辱、php 編程一樣鸵钝,只要有一個(gè)能編寫代碼的文本編輯器和一個(gè)能解釋執(zhí)行的腳本解釋器就可以了。

Linux 的 Shell 種類眾多焕妙,常見的有:

Bourne Shell(/usr/bin/sh或/bin/sh)
Bourne Again Shell(/bin/bash)
C Shell(/usr/bin/csh)
K Shell(/usr/bin/ksh)
Shell for Root(/sbin/sh)

三蒋伦、基本操作

1、創(chuàng)建一個(gè)打印一行文字的shell腳本

  • 創(chuàng)建一個(gè)frog文件
touch frog.sh
vi frog.sh
  • 按i編輯內(nèi)容
#!/bin/sh
a='hellow world'
echo $a

(第一行指定了解釋器
第三行打臃偃怠)

  • Esc+shift+zz退出痕届。
  • 運(yùn)行腳本
sh frog.sh

2、啟動(dòng)hive

編輯frog.sh文件末患,dd清除相關(guān)內(nèi)容研叫,保留第一行指定編輯器。

#!/bin/sh
hive

退出并運(yùn)行

sh frog.sh

3璧针、查看hive數(shù)據(jù)庫

編輯frog.sh文件嚷炉,dd清除相關(guān)內(nèi)容,保留第一行指定編輯器探橱。

#!/bin/sh
hive -v -e"
show databases;
";

第三行為hive中的sql語句申屹,展示數(shù)據(jù)庫文件。
這樣就可以不進(jìn)入hive數(shù)據(jù)庫直接運(yùn)行.sh文件運(yùn)行sql語句了隧膏,批量執(zhí)行省時(shí)省力,實(shí)現(xiàn)數(shù)據(jù)庫定時(shí)更新哗讥。

運(yùn)行shell腳本的效果

4、定向保存腳本結(jié)果

強(qiáng)制清除當(dāng)前路徑下的文件

rm -rf *

創(chuàng)建.sh文件

vi runshell.sh
#!/bin/sh
hive -v -e"
show databases;
";

運(yùn)行的結(jié)果定向保存到日志文件

sh runshell.sh > runshell.log  
hive語句運(yùn)行結(jié)果不在顯示到窗口中

查看.log文件

cat runshell.log

5胞枕、斷連結(jié)果保存

腳本程序中所對應(yīng)的hive數(shù)據(jù)庫如果數(shù)據(jù)量特別大的情況下杆煞,有可能斷開連接。

nohup sh runshell.sh >runshell.log 2>&1  & 

"2>&1 &"標(biāo)準(zhǔn)錯(cuò)誤輸出保存到runshell.log中

  • 運(yùn)行
jobs 

查看進(jìn)程號

jobs -l
第二次運(yùn)行jobs -l發(fā)現(xiàn)運(yùn)行完畢

查看日志:

cat *.log
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末腐泻,一起剝皮案震驚了整個(gè)濱河市决乎,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌派桩,老刑警劉巖构诚,帶你破解...
    沈念sama閱讀 211,194評論 6 490
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異铆惑,居然都是意外死亡唤反,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,058評論 2 385
  • 文/潘曉璐 我一進(jìn)店門鸭津,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人肠缨,你說我怎么就攤上這事逆趋。” “怎么了晒奕?”我有些...
    開封第一講書人閱讀 156,780評論 0 346
  • 文/不壞的土叔 我叫張陵闻书,是天一觀的道長名斟。 經(jīng)常有香客問我,道長魄眉,這世上最難降的妖魔是什么砰盐? 我笑而不...
    開封第一講書人閱讀 56,388評論 1 283
  • 正文 為了忘掉前任,我火速辦了婚禮坑律,結(jié)果婚禮上岩梳,老公的妹妹穿的比我還像新娘。我一直安慰自己晃择,他們只是感情好冀值,可當(dāng)我...
    茶點(diǎn)故事閱讀 65,430評論 5 384
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著宫屠,像睡著了一般列疗。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上浪蹂,一...
    開封第一講書人閱讀 49,764評論 1 290
  • 那天抵栈,我揣著相機(jī)與錄音,去河邊找鬼坤次。 笑死古劲,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的浙踢。 我是一名探鬼主播绢慢,決...
    沈念sama閱讀 38,907評論 3 406
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼洛波!你這毒婦竟也來了胰舆?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 37,679評論 0 266
  • 序言:老撾萬榮一對情侶失蹤蹬挤,失蹤者是張志新(化名)和其女友劉穎缚窿,沒想到半個(gè)月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體焰扳,經(jīng)...
    沈念sama閱讀 44,122評論 1 303
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡倦零,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,459評論 2 325
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了吨悍。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片扫茅。...
    茶點(diǎn)故事閱讀 38,605評論 1 340
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖育瓜,靈堂內(nèi)的尸體忽然破棺而出葫隙,到底是詐尸還是另有隱情,我是刑警寧澤躏仇,帶...
    沈念sama閱讀 34,270評論 4 329
  • 正文 年R本政府宣布恋脚,位于F島的核電站腺办,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏糟描。R本人自食惡果不足惜怀喉,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,867評論 3 312
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望船响。 院中可真熱鬧躬拢,春花似錦、人聲如沸灿意。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,734評論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽缤剧。三九已至馅袁,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間荒辕,已是汗流浹背汗销。 一陣腳步聲響...
    開封第一講書人閱讀 31,961評論 1 265
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留抵窒,地道東北人弛针。 一個(gè)月前我還...
    沈念sama閱讀 46,297評論 2 360
  • 正文 我出身青樓,卻偏偏與公主長得像李皇,于是被迫代替她去往敵國和親削茁。 傳聞我的和親對象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 43,472評論 2 348