6月22日第三十二次早課(hadoop)

1.hadoop的褒義狹義

狹義指hadoop所宰,廣義指hadoop生態(tài)圈

2.hadoop三大組件绒尊,分別做什么?官網(wǎng)地址是什么

hdfs,mr仔粥,yarn婴谱, ? ? ? ? ? hadoop.apache.org

3.hdfs的塊默認(rèn)大小,副本數(shù)默認(rèn)多少?哪個參數(shù)控制會找嗎躯泰?

128M谭羔,3

4.hdfs進(jìn)程有哪些?按啟動順序

nn dn snn

5.談?wù)剬ps命令的理解

顯示java進(jìn)程信息的一個命令

6.談?wù)剬id文件的理解

保存進(jìn)程號的文件

7.說說你們會的hdfs哪些shell命令

??hdfs dfs -ls -mkdir -text -cat -mv -cp

8.NN,DN麦向,SNN節(jié)點分別做什么的?

? ??NN存儲元數(shù)據(jù)

????DN存儲數(shù)據(jù)

????SNN默認(rèn)一小時的冷備

9.淺談副本放置策略

?首先就近dn瘟裸,然后考慮當(dāng)前機(jī)柜不同dn,再不同機(jī)架dn诵竭,最后考慮跨數(shù)據(jù)中心dn

10.(面試題)hdfs讀寫流程话告,mr提交到y(tǒng)arn流程? 這三塊,博客有沒有文檔了?


11.yarn的調(diào)優(yōu)參數(shù)那兩篇秀撇,你們博客上有沒有?

12.談?wù)勀銈儗huffle的初步理解

? ??預(yù)先reduce超棺,減少reduce的復(fù)雜度

13.hive里哪種SQL會執(zhí)行mr job?

? ? 聚合,join

? ??insert ... as select

14.hive的元數(shù)據(jù)和數(shù)據(jù)分別存儲在哪?

? ??mysql呵燕,hdfs

15.你們的博客有hive的 分區(qū) 作業(yè)嗎?做了沒

16.你們的博客有hive的 udf函數(shù) 作業(yè)嗎?做了沒

17.你們的博客有sqoop從MySQL抽取到hdfs或者h(yuǎn)ive作業(yè)嗎?做了沒

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末棠绘,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌氧苍,老刑警劉巖夜矗,帶你破解...
    沈念sama閱讀 206,311評論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異让虐,居然都是意外死亡紊撕,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,339評論 2 382
  • 文/潘曉璐 我一進(jìn)店門赡突,熙熙樓的掌柜王于貴愁眉苦臉地迎上來对扶,“玉大人,你說我怎么就攤上這事惭缰±四希” “怎么了?”我有些...
    開封第一講書人閱讀 152,671評論 0 342
  • 文/不壞的土叔 我叫張陵漱受,是天一觀的道長络凿。 經(jīng)常有香客問我,道長昂羡,這世上最難降的妖魔是什么絮记? 我笑而不...
    開封第一講書人閱讀 55,252評論 1 279
  • 正文 為了忘掉前任,我火速辦了婚禮虐先,結(jié)果婚禮上怨愤,老公的妹妹穿的比我還像新娘。我一直安慰自己赴穗,他們只是感情好憔四,可當(dāng)我...
    茶點故事閱讀 64,253評論 5 371
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著般眉,像睡著了一般了赵。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上甸赃,一...
    開封第一講書人閱讀 49,031評論 1 285
  • 那天柿汛,我揣著相機(jī)與錄音,去河邊找鬼埠对。 笑死络断,一個胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的项玛。 我是一名探鬼主播貌笨,決...
    沈念sama閱讀 38,340評論 3 399
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼襟沮!你這毒婦竟也來了锥惋?” 一聲冷哼從身側(cè)響起昌腰,我...
    開封第一講書人閱讀 36,973評論 0 259
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎膀跌,沒想到半個月后遭商,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 43,466評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡捅伤,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 35,937評論 2 323
  • 正文 我和宋清朗相戀三年劫流,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片丛忆。...
    茶點故事閱讀 38,039評論 1 333
  • 序言:一個原本活蹦亂跳的男人離奇死亡祠汇,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出蘸际,到底是詐尸還是另有隱情座哩,我是刑警寧澤徒扶,帶...
    沈念sama閱讀 33,701評論 4 323
  • 正文 年R本政府宣布粮彤,位于F島的核電站,受9級特大地震影響姜骡,放射性物質(zhì)發(fā)生泄漏导坟。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 39,254評論 3 307
  • 文/蒙蒙 一圈澈、第九天 我趴在偏房一處隱蔽的房頂上張望惫周。 院中可真熱鬧,春花似錦康栈、人聲如沸递递。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,259評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽登舞。三九已至,卻和暖如春悬荣,著一層夾襖步出監(jiān)牢的瞬間菠秒,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 31,485評論 1 262
  • 我被黑心中介騙來泰國打工氯迂, 沒想到剛下飛機(jī)就差點兒被人妖公主榨干…… 1. 我叫王不留践叠,地道東北人。 一個月前我還...
    沈念sama閱讀 45,497評論 2 354
  • 正文 我出身青樓嚼蚀,卻偏偏與公主長得像禁灼,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子轿曙,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 42,786評論 2 345

推薦閱讀更多精彩內(nèi)容

  • 一弄捕、系統(tǒng)參數(shù)配置優(yōu)化 1哮独、系統(tǒng)內(nèi)核參數(shù)優(yōu)化配置 修改文件/etc/sysctl.conf,添加如下配置察藐,然后執(zhí)行s...
    張偉科閱讀 3,721評論 0 14
  • 各版本hadoop文檔地址 Hadoop的框架最核心的設(shè)計就是:HDFS(Hadoop Distributed F...
    MicoCube閱讀 969評論 0 2
  • 之前的有點忘記了,這里在云筆記拿出來再玩玩.看不懂的可以留言 大家可以嘗試下Ambari來配置Hadoop的相關(guān)環(huán)...
    HT_Jonson閱讀 2,942評論 0 50
  • 做一個平凡的人皮璧,心向陽光、沉靜安恬分飞。忙時悴务,兢兢業(yè)業(yè);閑時譬猫,與親作伴抑或抱書而眠讯檐。 做一個平凡的人,不好高騖遠(yuǎn)染服,不心...
    陌臣閱讀 332評論 0 0
  • “媽媽痢毒,這是變身的小藍(lán),超人豹蚕甥!” “我是粉紅豹哪替!” 比賽前夜你們興奮的跟我分享新車菇怀,每一次大賽前凭舶,我都會給你們設(shè)...
    吉祥如意媽咪閱讀 544評論 0 0