hive筆記(一)

1.視圖:

1)創(chuàng)建視圖:

CREATE OR REPLACE VIEW ods.speaktrain_teacher_homework_v

AS

select

a.name,

a.id

from speaktrain_0001_teacher_homework_ex a

2)刪除視圖:drop? view? ods.speaktrain_teacher_homework_v

2.分區(qū)

1)創(chuàng)建分區(qū)表:

create table rptdata.fact_speaktrain_upload_homework_detail(

? ? ? id? ? ? ? ? ? ? ? ? string,

? ? student_id? ? ? ? ? string,

? ? book_id? ? ? ? ? ? string,

? ? do_qst_num? ? ? ? ? string,

)partitioned BY (src_file_day string)

stored as parquet;

insert overwrite table rptdata.fact_speaktrain_upload_homework_detail PARTITION (src_file_day = "20180610")

3.正則表達(dá)式:

regexp_replace("IloveYou","You","") 結(jié)果為:Ilove

正則匹配函數(shù) regexp_extract

語(yǔ)法: ? ?regexp_extract(string?subject, ?string?pattern, ?int?index)

返回值:?string

說明: ?將字符串subject按照pattern正則表達(dá)式的規(guī)則拆分凰浮,返回index指定的字符励烦。

第一參數(shù): ? 要處理的字段

第二參數(shù): ? ?需要匹配的正則表達(dá)式

第三個(gè)參數(shù):

0是顯示與之匹配的整個(gè)字符串

1 是顯示第一個(gè)括號(hào)里面的

2 是顯示第二個(gè)括號(hào)里面的字段...

注意夭禽,在有些情況下要使用轉(zhuǎn)義字符(雙斜杠了‘\\’)城菊。

正則匹配字符解釋:

^ 表示開頭

$ 表示結(jié)尾

. 表示任意字符

* 表示任意多個(gè)

關(guān)于正則表達(dá)式的符號(hào)及意義:

/ ?? 做為轉(zhuǎn)義秘蛇,即通常在"/"后面的字符不按原來意義解釋其做,如/b/匹配字符"b",當(dāng)b前面加了反斜桿后//b/赁还,轉(zhuǎn)意為匹配一個(gè)單詞的邊界妖泄。

-或- 對(duì)正則表達(dá)式功能字符的還原,如"*"匹配它前面元字符0次或多次艘策,/a*/將匹配a,aa,aaa蹈胡,加了"/"后,/a/*/將只匹配"a*"。

^ 匹配一個(gè)輸入或一行的開頭罚渐,/^a/匹配"an A"却汉,而不匹配"An a"

$ 匹配一個(gè)輸入或一行的結(jié)尾,/a$/匹配"An a"荷并,而不匹配"an A"

* 匹配前面元字符0次或多次合砂,/ba*/將匹配b,ba,baa,baaa

+ 匹配前面元字符1次或多次,/ba*/將匹配ba,baa,baaa

? 匹配前面元字符0次或1次源织,/ba*/將匹配b,ba

(x) 匹配x保存x在名為$1...$9的變量中

x|y 匹配x或y

{n} 精確匹配n次

{n,} 匹配n次以上

{n,m} 匹配n-m次

[xyz] 字符集(character set)翩伪,匹配這個(gè)集合中的任一一個(gè)字符(或元字符)

[^xyz] 不匹配這個(gè)集合中的任何一個(gè)字符

[/b] 匹配一個(gè)退格符

/b 匹配一個(gè)單詞的邊界

/B 匹配一個(gè)單詞的非邊界

/cX 這兒,X是一個(gè)控制符谈息,//cM/匹配Ctrl-M

/d 匹配一個(gè)字?jǐn)?shù)字符缘屹,//d/ = /[0-9]/

/D 匹配一個(gè)非字?jǐn)?shù)字符,//D/ = /[^0-9]/

/n 匹配一個(gè)換行符

/r 匹配一個(gè)回車符

/s 匹配一個(gè)空白字符侠仇,包括/n,/r,/f,/t,/v等

/S 匹配一個(gè)非空白字符轻姿,等于/[^/n/f/r/t/v]/

/t 匹配一個(gè)制表符

/v 匹配一個(gè)重直制表符

/w 匹配一個(gè)可以組成單詞的字符(alphanumeric,這是我的意譯傅瞻,含數(shù)字)踢代,包括下劃線,如[/w]匹配"$5.98"中的5嗅骄,等于[a-zA-Z0-9]

/W 匹配一個(gè)不可以組成單詞的字符胳挎,如[/W]匹配"$5.98"中的$,等于[^a-zA-Z0-9]

'( )' 標(biāo)記一個(gè)子表達(dá)式的開始和結(jié)束位置溺森。

'[]' 標(biāo)記一個(gè)中括號(hào)表達(dá)式慕爬。

/num 匹配 num,其中 num 是一個(gè)正整數(shù)屏积。對(duì)所獲取的匹配的引用医窿。

字符簇:?

[[:alpha:]] 任何字母。

[[:digit:]] 任何數(shù)字炊林。

[[:alnum:]] 任何字母和數(shù)字姥卢。

[[:space:]] 任何白字符。

[[:upper:]] 任何大寫字母渣聚。

[[:lower:]] 任何小寫字母独榴。

[[:punct:]] 任何標(biāo)點(diǎn)符號(hào)。

[[:xdigit:]] 任何16進(jìn)制的數(shù)字奕枝,相當(dāng)于[0-9a-fA-F]

[[:<:]],[[:>:]]?標(biāo)記表示word邊界棺榔。它們分別與word的開始和結(jié)束匹配。word是一系列字字符隘道,其前面和后面均沒有字字符症歇。字字符是alnum類中的字母數(shù)字字符或下劃線(_)

各種操作符的運(yùn)算優(yōu)先級(jí):

/ 轉(zhuǎn)義符

(), (?:), (?=), [] 圓括號(hào)和方括號(hào)

*, +, ?, {n}, {n,}, {n,m} 限定符

^, $, anymetacharacter 位置和順序

例:

1)? select regexp_extract('hitdecisiondlist','(i)(.*?)(e)',0) ;

得到的結(jié)果為:

itde

2)??select regexp_extract('hitdecisiondlist','(i)(.*?)(e)',1) ;

得到的結(jié)果為:

i

3)??select regexp_extract('hitdecisiondlist','(i)(.*?)(e)',2) ;

得到的結(jié)果為:

td

4)? select regexp_extract('x=a3&x=18abc&x=2&y=3&x=4','x=([0-9]+)([a-z]+)',2) from default.dual;

得到的結(jié)果為:

abc

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末郎笆,一起剝皮案震驚了整個(gè)濱河市匆背,隨后出現(xiàn)的幾起案子澈吨,更是在濱河造成了極大的恐慌,老刑警劉巖惑惶,帶你破解...
    沈念sama閱讀 218,204評(píng)論 6 506
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件德频,死亡現(xiàn)場(chǎng)離奇詭異苍息,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī)壹置,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,091評(píng)論 3 395
  • 文/潘曉璐 我一進(jìn)店門竞思,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人钞护,你說我怎么就攤上這事盖喷。” “怎么了难咕?”我有些...
    開封第一講書人閱讀 164,548評(píng)論 0 354
  • 文/不壞的土叔 我叫張陵课梳,是天一觀的道長(zhǎng)。 經(jīng)常有香客問我余佃,道長(zhǎng)暮刃,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 58,657評(píng)論 1 293
  • 正文 為了忘掉前任爆土,我火速辦了婚禮椭懊,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘步势。我一直安慰自己氧猬,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,689評(píng)論 6 392
  • 文/花漫 我一把揭開白布坏瘩。 她就那樣靜靜地躺著盅抚,像睡著了一般。 火紅的嫁衣襯著肌膚如雪倔矾。 梳的紋絲不亂的頭發(fā)上妄均,一...
    開封第一講書人閱讀 51,554評(píng)論 1 305
  • 那天,我揣著相機(jī)與錄音哪自,去河邊找鬼丰包。 笑死,一個(gè)胖子當(dāng)著我的面吹牛提陶,可吹牛的內(nèi)容都是我干的烫沙。 我是一名探鬼主播匹层,決...
    沈念sama閱讀 40,302評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼隙笆,長(zhǎng)吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼锌蓄!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起撑柔,我...
    開封第一講書人閱讀 39,216評(píng)論 0 276
  • 序言:老撾萬榮一對(duì)情侶失蹤瘸爽,失蹤者是張志新(化名)和其女友劉穎,沒想到半個(gè)月后铅忿,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體剪决,經(jīng)...
    沈念sama閱讀 45,661評(píng)論 1 314
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,851評(píng)論 3 336
  • 正文 我和宋清朗相戀三年檀训,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了柑潦。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 39,977評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡峻凫,死狀恐怖渗鬼,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情荧琼,我是刑警寧澤譬胎,帶...
    沈念sama閱讀 35,697評(píng)論 5 347
  • 正文 年R本政府宣布,位于F島的核電站命锄,受9級(jí)特大地震影響堰乔,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜脐恩,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,306評(píng)論 3 330
  • 文/蒙蒙 一镐侯、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧被盈,春花似錦析孽、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,898評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)。三九已至身堡,卻和暖如春邓尤,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背贴谎。 一陣腳步聲響...
    開封第一講書人閱讀 33,019評(píng)論 1 270
  • 我被黑心中介騙來泰國(guó)打工汞扎, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人擅这。 一個(gè)月前我還...
    沈念sama閱讀 48,138評(píng)論 3 370
  • 正文 我出身青樓澈魄,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親仲翎。 傳聞我的和親對(duì)象是個(gè)殘疾皇子痹扇,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,927評(píng)論 2 355

推薦閱讀更多精彩內(nèi)容