14篇文章 · 14956字 · 1人關(guān)注
-
[ms]為什么選擇parquet及orc和parquet區(qū)別spark支持parquethive支持parquetcsv存儲的大小與實際文件大小一樣，若沒有壓縮拘悦，占用容量=實際大小*副本數(shù)目parquet...
-
hive中分區(qū)表和分桶表的區(qū)別
Hive將表劃分為分區(qū)(partition)表和分桶(bucket)表星著。 分區(qū)可以讓數(shù)據(jù)的部分查詢變得更快跋炕，也就是說久橙，在加載數(shù)據(jù)的時候可以指定加...
-
Hive語句綜合練習(xí)
經(jīng)典SQL練習(xí)題第一步區(qū)：創(chuàng)建mysql表第二步：導(dǎo)入數(shù)據(jù)到mysql里面去第三步：創(chuàng)建hive表與myslq表字段對應(yīng)第四步：導(dǎo)出myslq表...
-
揭秘hive常見面試題(一)-使用 Hive 進(jìn)行手機(jī)流量統(tǒng)計使用 Hive 進(jìn)行手機(jī)流量統(tǒng)計 問題導(dǎo)讀1.hive 實現(xiàn)統(tǒng)計的查詢語句是什么？2.生產(chǎn)環(huán)境中為什么建議使用外部表诉儒？3.hadoop mapr...
-
揭秘hive常見面試題(四)-20道
一個文本文件葡缰，找出前 10 個經(jīng)常出現(xiàn)的詞，但這次文件比較長，說是上億行或十億行泛释， 總之無法一次讀入內(nèi)存滤愕，問最優(yōu)解。方案 1：首先根據(jù)用 has...
-
揭秘hive常見面試題(二)-20道
1你們數(shù)據(jù)庫怎么導(dǎo)入 hive 的,有沒有出現(xiàn)問題 使用 sqoop 導(dǎo)入胁澳，我們公司的數(shù)據(jù)庫中設(shè)計了 text 字段该互，導(dǎo)致導(dǎo)入的時候出現(xiàn)了緩存不...
-
揭秘hive常見面試題(五)-20道
1） 用hive實現(xiàn) select a.key,a.value from a where a.key not in (select b.ke...
-
揭秘hive常見面試題(七)-20道
hive job的優(yōu)化本地化執(zhí)行 set hive.exec.mode.local.auto=true;當(dāng)一個job滿足如下條件的時候才能真正使...
-
揭秘hive常見面試題(六)-20道為什么創(chuàng)建類 DataWritable？ 【揭秘hive常見面試題(一)-13】 如何實現(xiàn)統(tǒng)計手機(jī)流量韭畸？ 【揭秘hive常見面試題(一)-13】...
