HBase介紹

一桃序、hbase應(yīng)用場景

  • 海量數(shù)據(jù)存儲,上百億行×上百萬列流昏,關(guān)系型數(shù)據(jù)庫一般最多30個列但两,單表五百萬

  • 準實時查詢鬓梅,上百億行×上百萬列情況百毫秒

  • 上百萬行數(shù)據(jù)沒必要放在hbase

  • 舉例說明實際業(yè)務(wù)場景中的應(yīng)用:交通GPS信息、移動電話信息谨湘、金融绽快、電商

二、hbase的特點

  • 容量大:hbase單表可以百億行紧阔、百萬列坊罢,數(shù)據(jù)矩陣橫向和縱向亮給維度所支持的數(shù)據(jù)兩級都非常具有彈性;

  • 面向列:hbase是面向列的存儲和權(quán)限控制擅耽,并支持獨立檢索活孩。列式存儲,其數(shù)據(jù)在表中是按照某列存儲的乖仇,這樣在查詢只需要少數(shù)幾個字段的時候憾儒,能大大減少讀取的數(shù)據(jù)量;

  • 多版本:hbase每列的數(shù)據(jù)存儲有多個版本version乃沙;

  • 稀疏性:為空的列并不占用存儲空間起趾,表可以設(shè)計的非常稀疏;

  • 擴展性:底層依賴于HDFS警儒,增加節(jié)點训裆;

  • 高可靠性:WAL機制保證了數(shù)據(jù)寫入時不會因集群異常而導致寫入數(shù)據(jù)丟失:Replication機制保證了在集群出現(xiàn)嚴重的問題時,數(shù)據(jù)不會發(fā)生丟失或損壞蜀铲。而且HBase底層使用HDFS HDFS本身也有備份边琉;

  • 高性能:底層LSM數(shù)據(jù)結(jié)構(gòu)和Rowkey有序排列等架構(gòu)上的獨特設(shè)計,使得hbase具有非常高的寫入性能蝙茶。region切分艺骂、主鍵索引和緩存機制使得hbase在海量數(shù)據(jù)下具備一定的隨機讀取性能,該性能針對Rowkey的查詢能達到毫秒級別隆夯。

三钳恕、hbase架構(gòu)體系與設(shè)計模型

hbase架構(gòu)體系

Column Family 列簇

表創(chuàng)建的時候,先建列簇蹄衷,插入數(shù)據(jù)時動態(tài)增加列

  1. 一張表不會超過5個列簇

  2. 每個列簇的列數(shù)沒有限制

  3. 列只有插入數(shù)據(jù)后存在

  4. 列在列簇中是有序的

四忧额、hbase對比mysql等關(guān)系型數(shù)據(jù)庫

  • hbase支持列動態(tài)增加

  • hbase支持數(shù)據(jù)自動切分

  • hbase支持高并發(fā)讀寫

  • hbase不支持條件查詢

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市愧口,隨后出現(xiàn)的幾起案子睦番,更是在濱河造成了極大的恐慌,老刑警劉巖耍属,帶你破解...
    沈念sama閱讀 207,113評論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件托嚣,死亡現(xiàn)場離奇詭異,居然都是意外死亡厚骗,警方通過查閱死者的電腦和手機示启,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,644評論 2 381
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來领舰,“玉大人夫嗓,你說我怎么就攤上這事〕寤啵” “怎么了舍咖?”我有些...
    開封第一講書人閱讀 153,340評論 0 344
  • 文/不壞的土叔 我叫張陵,是天一觀的道長锉桑。 經(jīng)常有香客問我排霉,道長,這世上最難降的妖魔是什么民轴? 我笑而不...
    開封第一講書人閱讀 55,449評論 1 279
  • 正文 為了忘掉前任郑诺,我火速辦了婚禮,結(jié)果婚禮上杉武,老公的妹妹穿的比我還像新娘辙诞。我一直安慰自己,他們只是感情好轻抱,可當我...
    茶點故事閱讀 64,445評論 5 374
  • 文/花漫 我一把揭開白布飞涂。 她就那樣靜靜地躺著,像睡著了一般祈搜。 火紅的嫁衣襯著肌膚如雪较店。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 49,166評論 1 284
  • 那天容燕,我揣著相機與錄音梁呈,去河邊找鬼。 笑死蘸秘,一個胖子當著我的面吹牛官卡,可吹牛的內(nèi)容都是我干的蝗茁。 我是一名探鬼主播,決...
    沈念sama閱讀 38,442評論 3 401
  • 文/蒼蘭香墨 我猛地睜開眼寻咒,長吁一口氣:“原來是場噩夢啊……” “哼哮翘!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起毛秘,我...
    開封第一講書人閱讀 37,105評論 0 261
  • 序言:老撾萬榮一對情侶失蹤饭寺,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后叫挟,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體艰匙,經(jīng)...
    沈念sama閱讀 43,601評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 36,066評論 2 325
  • 正文 我和宋清朗相戀三年抹恳,在試婚紗的時候發(fā)現(xiàn)自己被綠了员凝。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 38,161評論 1 334
  • 序言:一個原本活蹦亂跳的男人離奇死亡适秩,死狀恐怖绊序,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情秽荞,我是刑警寧澤骤公,帶...
    沈念sama閱讀 33,792評論 4 323
  • 正文 年R本政府宣布,位于F島的核電站扬跋,受9級特大地震影響阶捆,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜钦听,卻給世界環(huán)境...
    茶點故事閱讀 39,351評論 3 307
  • 文/蒙蒙 一洒试、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧朴上,春花似錦垒棋、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,352評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至衣撬,卻和暖如春乖订,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背具练。 一陣腳步聲響...
    開封第一講書人閱讀 31,584評論 1 261
  • 我被黑心中介騙來泰國打工乍构, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人扛点。 一個月前我還...
    沈念sama閱讀 45,618評論 2 355
  • 正文 我出身青樓哥遮,卻偏偏與公主長得像岂丘,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子昔善,可洞房花燭夜當晚...
    茶點故事閱讀 42,916評論 2 344

推薦閱讀更多精彩內(nèi)容

  • 【什么是大數(shù)據(jù)元潘、大數(shù)據(jù)技術(shù)】 大數(shù)據(jù)畔乙,又稱巨量資料君仆,指的是所涉及的數(shù)據(jù)資料量規(guī)模巨大到無法在合理時間內(nèi)通過傳統(tǒng)的應(yīng)...
    kimibob閱讀 2,733評論 0 51
  • Zookeeper用于集群主備切換。 YARN讓集群具備更好的擴展性牲距。 Spark沒有存儲能力返咱。 Spark的Ma...
    Yobhel閱讀 7,246評論 0 34
  • HBase是Hadoop 的正式子項目,它是一個面向列的分布式數(shù)據(jù)庫牍鞠。是建立的hdfs之上咖摹,提供高可靠性、高性能难述、...
    我是嘻哈大哥閱讀 832評論 0 1
  • 1.HBase概述 HBase是一個開源的非關(guān)系型分布式數(shù)據(jù)庫(NoSQL)萤晴,它參考了谷歌的BigTable建模,...
    JavaHub閱讀 724評論 0 0
  • 公司:海寧 姓名:彭洪 寧波盛和塾《六項精進》224期學員【日精進打卡第49天】 【知~學習】 《項精進》大綱 背...
    啟帆彭羽閱讀 356評論 0 0