IP屬地：浙江
-
Hive Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.StatsTaskhive insert 在非overwrite 插入數(shù)據(jù)時,且表中已經(jīng)存在數(shù)據(jù)時 容易報以下錯誤 這時只需要加上這條設(shè)置即可 set hive....
-
Hive3.x測試_null跟null 關(guān)聯(lián)問題結(jié)論: hive當(dāng)中null與null 無法進(jìn)行關(guān)聯(lián) 結(jié)果 NULL 沒有關(guān)聯(lián)上
-
【Hive error】genColumnStatsTask
今天在使用hive3.3的時候,hive語法報錯 報錯場景 解決方法 后面加limit
-
活著真累啊
活著真沒意思
-
數(shù)據(jù)采集工具DATAX[TOC] DataX簡介 Datax是阿里開源的支持多數(shù)據(jù)源的數(shù)據(jù)采集工具,能夠?qū)崿F(xiàn) RDBMS/nosql數(shù)據(jù)庫之間數(shù)據(jù)導(dǎo)入導(dǎo)出支持MySQ...
-
Hive-hdfs刪除文件之后,元數(shù)據(jù)信息還存在的問題
場景:今天在刪除一個表分區(qū)數(shù)據(jù)的時候,直接刪除的HDFS對應(yīng)目錄下的文件 ds=20230614 就是hdfs的數(shù)據(jù)刪除了,使用show par...
-
Dataworks簡介前言 dataworks是一款 集數(shù)據(jù)采集\數(shù)據(jù)存儲\數(shù)據(jù)計算\報表可視化\數(shù)據(jù)治理為一體的綜合化\全鏈路的大數(shù)據(jù)開發(fā)治理平臺 適用場景 比如...
-
left_join onleft join on on后邊如果是主表條件 結(jié)果集中會有 但不參與join 總結(jié)：Hive SQL 中 LEFT JOIN 單獨(dú)針對...
-
impala優(yōu)化及規(guī)范(自用)
數(shù)據(jù)采集規(guī)范 ods層經(jīng)常遇到 增全量合并的情況即dt = t+2 為全量數(shù)據(jù)t+1 為增量數(shù)據(jù) 開發(fā)規(guī)范 存儲策略方面:存儲有全量,增量 增全...