3.3 yarn資源管理系統(tǒng) yarn是一種新的Hadoop資源管理器疯潭,是一個通用的資源管理系統(tǒng)灭美』昊伲可以為上層應(yīng)用提供統(tǒng)一的資源調(diào)度村视,在資源共享涮坐、資源利用上有很大的好處焰雕。 ya...
3.3 yarn資源管理系統(tǒng) yarn是一種新的Hadoop資源管理器疯潭,是一個通用的資源管理系統(tǒng)灭美』昊伲可以為上層應(yīng)用提供統(tǒng)一的資源調(diào)度村视,在資源共享涮坐、資源利用上有很大的好處焰雕。 ya...
第二章是搭建IDEA開發(fā)環(huán)境和Linux虛擬機(jī) 這章的內(nèi)容較少舵变,但需要花費(fèi)的時間較長记焊,畢竟都是實操部分首先是搭建IDEA開發(fā)環(huán)境每一個IT開發(fā)人員都得有一個合適的開發(fā)工具逸月,I...
這本書有8個章節(jié),從基礎(chǔ)逐漸展開遍膜,但是書籍總共也只有236頁碗硬,還包含了Hadoop、spark和Flink三個知識點(diǎn)瓢颅。所以感覺講得可能不太會很深入恩尾。這里畢竟是書籍的閱讀部分,...
Shell編程 Linux中的shell腳本是一種特殊的應(yīng)用程序挽懦,介于操作系統(tǒng)和內(nèi)核之間翰意,起到命令解釋的作用。這里我們快速入門先新建文件/usr/shell/hello.sh...
這里需要學(xué)習(xí)Linux常用的快捷鍵: 終端命令格式 command [-options] [parameter]第一個是命令名,第二個是選項冀偶,對命令進(jìn)行控制虎囚,也可以省略;第三...
這里我們學(xué)習(xí)一個新的交互式查詢工具impala我們主要會學(xué)習(xí)到下面幾個方面:要點(diǎn)1:impala是什么蔫磨,優(yōu)勢淘讥、劣勢、與Hive對比堤如、適用場景要點(diǎn)2:有哪些組件蒲列,組件們的作用要...
今天學(xué)的是數(shù)據(jù)遷移工具Sqoop,關(guān)于flume搀罢,第二遍的時候再去學(xué)一下具體的使用蝗岖。 了解Sqoop的結(jié)構(gòu)、功能和一些大概情況 學(xué)習(xí)Sqoop的應(yīng)用(數(shù)據(jù)導(dǎo)入榔至、數(shù)據(jù)導(dǎo)出) 學(xué)...
Flume flume是一個日志采集工具抵赢,這里需要注意,必須是日志哦唧取。 當(dāng)然了數(shù)據(jù)采集工具還有很多了铅鲤,不過Flume應(yīng)該是最火的,這里這里只講這個枫弟。 flume有三個主要的組...