發(fā)簡信
IP屬地：遼寧
-
Do not go gentle into that good night-Dylan Thomas
Do not go gentle into that good night,Old age should burn and rave at cl...
-
Alfred Tennyson: Ulysses
轉載一首我很喜歡的英文詩，丁尼生的《尤利西斯》。 It little profits that an idle king, | 這太無謂——當一...
-
Spark RDD依賴關系簡述RDD，即Resilient Distributed Dataset贫导，是Spark的核心概念。這篇文章就是講講spark的rdd依賴關系的，不理...
-
Impala的SYNC_DDL
那天去面試卖宠，面試官問我知不知道Impala同步數(shù)據(jù)的方式，我回答invalidate metadata和refresh table [parti...
-
Spark的Job Historyserver無法查看歷史日志記錄的解決最近下載了個CDH的quickstart vm玩玩忧饭，發(fā)現(xiàn)個問題逗堵，spark 的Job History Server無法查看已經(jīng)跑過的Spark ...
-
IMPALA常用命令COMPUTE STATS簡述前面介紹了HIVE的ANALYZE TABLE命令， IMPALA也提供了一個類似的命令叫COMPUTE STATS眷昆。這篇文章就是講講這個命令蜒秤。...
-
HIVE常用命令之ANALYZE TABLE命令簡述上次講過HIVE 的一個常用命令 MSCK REPAIR TABLE ， 這次講講HIVE的ANALYZE TABLE命令亚斋，接下來還會講下Imp...
-
如何獲取HDFS上文件的存儲位置我們知道存儲在HDFS上的文件一般有多個副本作媚，默認是3個，訪問這個文件是通過一個URL來的帅刊，但是這個文件到底存儲在哪個DataNode節(jié)點的什么...
-
HIVE控制導出數(shù)據(jù)的大小和數(shù)量
工作中碰到個需求纸泡，需要我去SFTP服務器采集HIVE導出的數(shù)據(jù)，由于這個大數(shù)據(jù)平臺設計問題赖瞒，很多東西沒考慮到女揭，他們的導出方式是用HIVE提供的i...