發(fā)簡信
IP屬地：北京
-
mysql導(dǎo)入emoji數(shù)據(jù)亂碼
想要mysql表支持emoji拜姿，需要設(shè)置表編碼為utf8mb4 mysql的字符集的作用域有三個層級一個數(shù)據(jù)庫級臼朗，一個是表級绕娘，一個是列級（字段級...
-
yarn任務(wù)監(jiān)控頁面查看SQL內(nèi)容集群中有很多hive任務(wù)在執(zhí)行划咐，某一個任務(wù)存在問題時需要分析執(zhí)行的hive job提交了什么語句，是有辦法從hadoop job監(jiān)控頁面查看的 ...
-
房屋出租房子在高新區(qū)舜華南路勺馆，華皓漢峪小區(qū)2期库物，兩室一廳。距離漢峪金谷签舞，齊魯軟件園近秕脓，小區(qū)里有幼兒園，旁邊是小學(xué)儒搭，附近有超市公交站吠架，生活設(shè)施全。
-
hive分組取隨機數(shù)
hive取隨機的數(shù)據(jù)搂鲫，可以使用rand()函數(shù)傍药，用rand()對數(shù)據(jù)排序，取topN如果要用到分組取隨機數(shù)魂仍，比如每個班級隨機取10人拐辽，針對這種每...
-
動態(tài)參數(shù)設(shè)定
elasticsearch.yml中盡量只寫必備的參數(shù)，其他可以通過api動態(tài)設(shè)置的參數(shù)都通過api來設(shè)定 動態(tài)設(shè)定的參數(shù)有transient和...
-
常用文件處理方法
GBK格式內(nèi)容轉(zhuǎn)碼 獲取文件路徑或文件名 hadoop mr 中使用如下方式 spark 中 獲取文件名中的ip信息擦酌，并將文件轉(zhuǎn)碼
-
Hive不可見字符的處理
指定查詢結(jié)果的分隔符 將查詢結(jié)果放到hdfs目錄上俱诸，默認的分隔符為不可見字符\001，可以追加參數(shù)指定分隔符 Linux下對不可見字符的處理 使...
-
hive開啟kerberos配置
啟動hive ThirftServer和hive metastore的需要跟管理員申請keytab
-
es 基于磁盤的shard分配參數(shù)
低警戒水位線——默認為磁盤容量的85％仑氛。 Elasticsearch不會將分片分配給使用磁盤超過85％的節(jié)點乙埃。它也可以設(shè)置為絕對字節(jié)值（如500...