
技術(shù)選型 數(shù)據(jù)存儲(chǔ) 考慮到數(shù)據(jù)量較大,采用傳統(tǒng)的關(guān)系型數(shù)據(jù)庫(kù)已經(jīng)不太合適净响,需要做大量的分庫(kù)分表操作。因此考慮nosql的方式喳瓣,常見的nosql...
海量數(shù)據(jù)如何分庫(kù)分表 一般我們的分庫(kù)策略有時(shí)間畏陕,類型配乓,頻率,下面來(lái)一一說(shuō)明怎么分庫(kù): (1)按時(shí)間分 按時(shí)間分的好處有很多犹芹。第一,可以做數(shù)...
flink實(shí)現(xiàn)指標(biāo)監(jiān)控 數(shù)據(jù)監(jiān)控都要求實(shí)時(shí)性,我把監(jiān)控分為2種蜈膨,一種是有狀態(tài)監(jiān)控屿笼,一種是無(wú)狀態(tài)監(jiān)控翁巍。有狀態(tài)就是指指標(biāo)的計(jì)算依賴于之前的數(shù)據(jù)驴一,...
關(guān)于hbase和hive的選擇 hbase是一個(gè)nosql數(shù)據(jù)庫(kù)曙咽,它能提供實(shí)時(shí)寫入和實(shí)時(shí)查詢,但是查詢的靈活性偏低例朱,必須按其rowkey進(jìn)行...
Hbase生產(chǎn)實(shí)踐 背景 HBase是一個(gè)分布式的、面向列的開源數(shù)據(jù)庫(kù)洒嗤,它是hadoop生態(tài)圈的一員,有海量數(shù)據(jù)存儲(chǔ)能力渔隶,對(duì)資源的消耗也相對(duì)較...
Hbase寫入性能優(yōu)化 背景 HBase是一個(gè)nosql數(shù)據(jù)庫(kù)洁奈,既然是數(shù)據(jù)庫(kù)绞灼,就會(huì)涉及到增刪改查利术,而...