Apache Doris常見問題答疑(一)

Q:invalid cluster id: xxxx

A:這個(gè)錯(cuò)誤可能會(huì)在show backends 或 show frontends 命令的結(jié)果中出現(xiàn)疆柔。通常出現(xiàn)在某個(gè)FE或BE節(jié)點(diǎn)的錯(cuò)誤信息列中。這個(gè)錯(cuò)誤的含義是套媚,Master FE向這個(gè)節(jié)點(diǎn)發(fā)送心跳信息后肠缔,該節(jié)點(diǎn)發(fā)現(xiàn)心跳信息中攜帶的 cluster id和本地存儲(chǔ)的 cluster id不同神僵,所以拒絕回應(yīng)心跳囤躁。

Doris的 Master FE 節(jié)點(diǎn)會(huì)主動(dòng)發(fā)送心跳給各個(gè)FE或BE節(jié)點(diǎn)德崭,并且在心跳信息中會(huì)攜帶一個(gè)cluster_id常潮。cluster_id是在一個(gè)集群初始化時(shí)弟胀,由Master FE生成的唯一集群標(biāo)識(shí)。當(dāng)FE或BE第一次收到心跳信息后喊式,則會(huì)將cluster_id以文件的形式保存在本地孵户。FE的該文件在元數(shù)據(jù)目錄的image/目錄下,BE則在所有數(shù)據(jù)目錄下都有一個(gè)cluster_id文件岔留。之后夏哭,每次節(jié)點(diǎn)收到心跳后,都會(huì)用本地cluster_id的內(nèi)容和心跳中的內(nèi)容作比對(duì)献联,如果不一致竖配,則拒絕響應(yīng)心跳。

該機(jī)制是一個(gè)節(jié)點(diǎn)認(rèn)證機(jī)制里逆,以防止接收到集群外的節(jié)點(diǎn)發(fā)送來的錯(cuò)誤的心跳信息进胯。

如果需要恢復(fù)這個(gè)錯(cuò)誤。首先要先確認(rèn)所有節(jié)點(diǎn)是否都是正確的集群中的節(jié)點(diǎn)原押。之后胁镐,對(duì)于FE節(jié)點(diǎn),可以嘗試修改元數(shù)據(jù)目錄下的 image/VERSION 文件中的 cluster_id 值后重啟FE。對(duì)于BE節(jié)點(diǎn)盯漂,則可以刪除所有數(shù)據(jù)目錄下的 cluster_id 文件后重啟 BE颇玷。

Q:Doris 是否支持修改列名?

A:不支持修改列名就缆。

Doris支持修改數(shù)據(jù)庫名帖渠、表名、分區(qū)名违崇、物化視圖(Rollup)名稱阿弃,以及列的類型、注釋羞延、默認(rèn)值等等渣淳。但遺憾的是,目前不支持修改列名伴箩。

因?yàn)橐恍v史原因入愧,目前列名稱是直接寫入到數(shù)據(jù)文件中的。Doris在查詢時(shí)嗤谚,也是通過類名查找到對(duì)應(yīng)的列的棺蛛。所以修改列名不僅是簡單的元數(shù)據(jù)修改,還會(huì)涉及到數(shù)據(jù)的重寫巩步,是一個(gè)非常重的操作旁赊。

我們不排除后續(xù)通過一些兼容手段來支持輕量化的列名修改操作。

Q:Unique Key模型的表是否支持創(chuàng)建物化視圖椅野?

A:

不支持终畅。Unique Key模型的表是一個(gè)對(duì)業(yè)務(wù)比較友好的表,因?yàn)槠涮赜械陌凑罩麈I去重的功能竟闪,能夠很方便的同步數(shù)據(jù)頻繁變更的業(yè)務(wù)數(shù)據(jù)庫离福。因此,很多用戶在將數(shù)據(jù)接入到Doris時(shí)炼蛤,會(huì)首先考慮使用Unique Key模型妖爷。

但遺憾的是,Unique Key模型的表是無法建立物化視圖的理朋。原因在于絮识,物化視圖的本質(zhì),是通過預(yù)計(jì)算來將數(shù)據(jù)“預(yù)先算好”嗽上,這樣在查詢時(shí)直接返回已經(jīng)計(jì)算好的數(shù)據(jù)笋除,來加速查詢。在物化視圖中炸裆,“預(yù)計(jì)算”的數(shù)據(jù)通常是一些聚合指標(biāo)垃它,比如求和、求count。這時(shí)国拇,如果數(shù)據(jù)發(fā)生變更洛史,如udpate或delete,因?yàn)轭A(yù)計(jì)算的數(shù)據(jù)已經(jīng)丟失了明細(xì)信息酱吝,因此無法同步的進(jìn)行更新也殖。比如一個(gè)求和值5,可能是 1+4务热,也可能是2+3忆嗜。因?yàn)槊骷?xì)信息的丟失,我們無法區(qū)分這個(gè)求和值是如何計(jì)算出來的崎岂,因此也就無法滿足更新的需求捆毫。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市冲甘,隨后出現(xiàn)的幾起案子绩卤,更是在濱河造成了極大的恐慌,老刑警劉巖江醇,帶你破解...
    沈念sama閱讀 206,723評(píng)論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件濒憋,死亡現(xiàn)場離奇詭異,居然都是意外死亡陶夜,警方通過查閱死者的電腦和手機(jī)凛驮,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,485評(píng)論 2 382
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來条辟,“玉大人黔夭,你說我怎么就攤上這事∥婊撸” “怎么了纠修?”我有些...
    開封第一講書人閱讀 152,998評(píng)論 0 344
  • 文/不壞的土叔 我叫張陵胳嘲,是天一觀的道長厂僧。 經(jīng)常有香客問我,道長了牛,這世上最難降的妖魔是什么颜屠? 我笑而不...
    開封第一講書人閱讀 55,323評(píng)論 1 279
  • 正文 為了忘掉前任,我火速辦了婚禮鹰祸,結(jié)果婚禮上甫窟,老公的妹妹穿的比我還像新娘。我一直安慰自己蛙婴,他們只是感情好粗井,可當(dāng)我...
    茶點(diǎn)故事閱讀 64,355評(píng)論 5 374
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般浇衬。 火紅的嫁衣襯著肌膚如雪懒构。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 49,079評(píng)論 1 285
  • 那天耘擂,我揣著相機(jī)與錄音胆剧,去河邊找鬼。 笑死醉冤,一個(gè)胖子當(dāng)著我的面吹牛秩霍,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播蚁阳,決...
    沈念sama閱讀 38,389評(píng)論 3 400
  • 文/蒼蘭香墨 我猛地睜開眼铃绒,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了韵吨?” 一聲冷哼從身側(cè)響起匿垄,我...
    開封第一講書人閱讀 37,019評(píng)論 0 259
  • 序言:老撾萬榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎归粉,沒想到半個(gè)月后椿疗,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 43,519評(píng)論 1 300
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡糠悼,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 35,971評(píng)論 2 325
  • 正文 我和宋清朗相戀三年届榄,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片倔喂。...
    茶點(diǎn)故事閱讀 38,100評(píng)論 1 333
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡铝条,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出席噩,到底是詐尸還是另有隱情班缰,我是刑警寧澤,帶...
    沈念sama閱讀 33,738評(píng)論 4 324
  • 正文 年R本政府宣布悼枢,位于F島的核電站埠忘,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏馒索。R本人自食惡果不足惜莹妒,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,293評(píng)論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望绰上。 院中可真熱鬧旨怠,春花似錦、人聲如沸蜈块。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,289評(píng)論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至爽哎,卻和暖如春谋梭,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背倦青。 一陣腳步聲響...
    開封第一講書人閱讀 31,517評(píng)論 1 262
  • 我被黑心中介騙來泰國打工瓮床, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人产镐。 一個(gè)月前我還...
    沈念sama閱讀 45,547評(píng)論 2 354
  • 正文 我出身青樓隘庄,卻偏偏與公主長得像,于是被迫代替她去往敵國和親癣亚。 傳聞我的和親對(duì)象是個(gè)殘疾皇子丑掺,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 42,834評(píng)論 2 345

推薦閱讀更多精彩內(nèi)容