文章目的: 1翰撑、向沒(méi)聽(tīng)過(guò)或者剛聽(tīng)過(guò)但是還對(duì)這個(gè)監(jiān)控系統(tǒng)沒(méi)有任何概念的開(kāi)發(fā)者介紹Prometheus的應(yīng)用場(chǎng)景。2敛瓷、向有需要深入的了解的人推薦一些博客杨赤、書籍。3丹墨、內(nèi)心真實(shí)想法:...
之前在講HashMap的時(shí)候提到過(guò)HashMap線程不安全,在并發(fā)環(huán)境下會(huì)發(fā)生死鎖問(wèn)題嬉愧,將導(dǎo)致CPU占用率接近100%贩挣。其實(shí)死鎖的說(shuō)法并不很貼切,應(yīng)該說(shuō)是一種死循環(huán)没酣。在JDK...
開(kāi)啟ranger開(kāi)關(guān)vim /etc/ecm/ranger-usersync-conf/ranger-ugsync-site.xml <name>ranger.usersyn...
我的理解是王财,local的/tmp目錄下的空文件夾是hive老版本的bug,博文中連接中的ambari集群是通過(guò)修改hive.downloaded.resources.dir參數(shù)修改的四康。而hive.exec.scratchdir是hive執(zhí)行過(guò)程中必要的臨時(shí)文件目錄搪搏。應(yīng)該是兩回事。
hadoop集群客戶端/tmp目錄下臨時(shí)文件夾處理在集群客戶端上執(zhí)行一些hive的sql后發(fā)現(xiàn)/tmp目錄下出現(xiàn)非常多的這樣格式的空目錄 導(dǎo)致客戶端的inode資源都快被耗盡 這是hive老版本(這里是1.1)的一個(gè)bug闪金,...
早就想寫這章了疯溺,一直懶得動(dòng)筆论颅,不過(guò)還好,總算靜下心來(lái)完成了囱嫩。 剛接觸Spark時(shí)恃疯,很希望能對(duì)它的運(yùn)行方式有個(gè)直觀的了解,而Spark同時(shí)支持多種運(yùn)行模式墨闲,官網(wǎng)和書籍中對(duì)他們的...
原因是jar包在運(yùn)行過(guò)程中因?yàn)橐{(diào)試被我mvn package重新編譯了今妄,程序依賴的包變化導(dǎo)致運(yùn)行時(shí)錯(cuò)誤。
最近對(duì)于hotfix有點(diǎn)困惑鸳碧,所以重新學(xué)習(xí)一下git盾鳞。參考資料,感謝瞻离。https://www.liaoxuefeng.com/wiki/896043488029600http...
參考資料 基于Impala平臺(tái)打造交互查詢系統(tǒng)(選型)Impala查詢優(yōu)化大數(shù)據(jù)CDH之查詢優(yōu)化Impala內(nèi)存優(yōu)化基礎(chǔ)語(yǔ)法 產(chǎn)品定位 實(shí)現(xiàn)語(yǔ)言:主要是C++性能: 略優(yōu)于P...
問(wèn)題 在CDH5.13.x啟用Sentry后腾仅,HiveServer2的Client(Beeline、Thrift)中不能使用add jar語(yǔ)句(hive cli方式還是可以的...
問(wèn)題 CM登錄頁(yè)面加載不出或者非常緩慢 現(xiàn)象 查看阿里云,發(fā)現(xiàn)對(duì)應(yīng)rds負(fù)載很高肉迫,對(duì)應(yīng)的SQL為 相關(guān)的數(shù)據(jù)就表是cm中的AUDITS表發(fā)現(xiàn)該表數(shù)據(jù)量比較大验辞,上億。 解決方法...
https://www.cloudera.com/documentation/enterprise/5-13-x/topics/impala_langref_unsuppor...
Spark的概念 https://www.cnblogs.com/wzj4858/p/8204411.html 核心基本概念 RDD(Resilient Distribute...
人民郵電出版社 第一章 為何選擇Flink 競(jìng)品:SparkStreaming/Storm/Samza/Apex Lambda架構(gòu)(不懂為何叫Lambda)https://a...
問(wèn)題 每次在idea中改完代碼本地編譯jar包再上傳服務(wù)器速度太慢 方法 只上傳代碼喊衫,在服務(wù)器上編譯 步驟 使用idea內(nèi)部的deployment工具上傳修改好的代碼
解決方法:https://www.cloudera.com/documentation/enterprise/release-notes/topics/cdh_rn_hive...
面向?qū)ο蟮娜筇卣?封裝把客觀事物封裝成抽象的類格侯,并且類可以把自己的數(shù)據(jù)和方法只讓可信的類或?qū)ο蟛僮鞅翘瑢?duì)不可信的信息進(jìn)行隱藏财著。 繼承對(duì)象的繼承關(guān)系代表了一種‘is a’的關(guān)系...