SQL開(kāi)發(fā)中經(jīng)常要用到日期類(lèi)型的轉(zhuǎn)換猖任。一如yyyymmdd和yyyy-mm-dd日期之間的切換常用轉(zhuǎn)換方法如下：方法1: from_unixti...

此前一直使用HIVE的Insert overwrite到本地目錄的方法進(jìn)行文件導(dǎo)出，但問(wèn)題多多瞬沦。主要原因是分隔符經(jīng)常出現(xiàn)在字段中，實(shí)操中用豎杠|...

HIVE數(shù)據(jù)導(dǎo)出的姿勢(shì) 1.問(wèn)題描述 之前一直使用hive -e "SELECT XXX FROM XXX" > /XXX/XXX.csv 命令...

Spark運(yùn)行在Standalone模式下產(chǎn)生的臨時(shí)目錄的問(wèn)題 1.問(wèn)題描述 收到運(yùn)維線上告警负蠕。告警信息：文件系統(tǒng)剩余空間小于5% on vol...

數(shù)據(jù)庫(kù)范式設(shè)計(jì)的意義 通常把一個(gè)數(shù)據(jù)庫(kù)分成兩個(gè)或多個(gè)表并定義表之間的關(guān)系以做到數(shù)據(jù)隔離遮糖，添加、刪除和修改某個(gè)字段只需要在一個(gè)表中進(jìn)行叠赐，接著可以通...

為什么要健身欲账？ 身體是革命的本錢(qián)，干啥事沒(méi)個(gè)健康健壯的身體芭概，能成嗎赛不。 程序員久坐，對(duì)頸椎腰椎前列腺不好罢洲，得活動(dòng)活動(dòng)筋骨踢故，有助于活久點(diǎn)文黎。 健身可以...

頭頂?shù)奶?yáng) 燃燒著青春的余熱它從來(lái)不會(huì)放棄 照耀著我們行進(jìn)寒冬不經(jīng)過(guò)這里 那只是迷霧的山林走完蒼老的石橋 感到潮濕的味道翻過(guò)那青山 你說(shuō)你看頭頂...

數(shù)據(jù)遷移 1、問(wèn)題描述 新搭建了一套CDH5.13.1集群殿较，需要將原apache上的數(shù)據(jù)遷移至新集群耸峭。 2、數(shù)據(jù)遷移工具 Distcp（分布式拷...

在編寫(xiě)shell腳本的時(shí)候經(jīng)常會(huì)用到引號(hào)淋纲，有些時(shí)候卻老是忘記單引號(hào)和雙引號(hào)之間的區(qū)別劳闹， 所以就整理一下供以后腦子不好使了的時(shí)候前來(lái)復(fù)習(xí)一下。首先...