hbase 集群管理--數(shù)據(jù)管理

1.增加RegionServer節(jié)點(diǎn)

①修改conf目錄下的regionservers文件端礼,添加新節(jié)點(diǎn)的主機(jī)名;
②復(fù)制該文件到集群中的所有機(jī)器拜鹤;
③啟動(dòng)該機(jī)器:
? ? ? 1.master節(jié)點(diǎn)上執(zhí)行start-hbase.sh腳本,其會(huì)檢查regionservers文件并跳過已經(jīng)啟動(dòng)的子節(jié)點(diǎn),將其中未啟動(dòng)的節(jié)點(diǎn)啟動(dòng)
? ? ? ? 2.對(duì)應(yīng)的子節(jié)點(diǎn)上執(zhí)行hbase-daemon.sh start regionserver命令饶唤,隨后該機(jī)器上的RegionServer服務(wù)啟動(dòng)
④節(jié)點(diǎn)啟動(dòng)之后會(huì)在ZK上注冊(cè)創(chuàng)建對(duì)應(yīng)的znode,然后它會(huì)加入集群被分配region等
*注意:Hbase底層是以HDFS來存儲(chǔ)數(shù)據(jù)的贯钩,且一般HDFS的DataNode和Hbase的RegionServer位于同一臺(tái)物理機(jī)上募狂,所以在增加一個(gè)RegionServer之前需要往HDFS里增加DataNode

2.被動(dòng)-移除RegionServer節(jié)點(diǎn)

①指定節(jié)點(diǎn)上運(yùn)行hbase-damon.sh stop命令;
②關(guān)閉此節(jié)點(diǎn)上的所有Region角雷;
③停止RegionServer進(jìn)程
④Zookeeper中對(duì)應(yīng)的Znode節(jié)點(diǎn)過期祸穷;
⑤Master檢測(cè)到Regionserver停止服務(wù);
⑥將此節(jié)點(diǎn)上的Region分配到其他機(jī)器


3.主動(dòng)-移除RegionServer節(jié)點(diǎn)

①運(yùn)行g(shù)raceful_stop.sh hostname腳本
②關(guān)閉Region均衡器勺三;
③從需要停止的RegionServer上移出Region雷滚,并隨機(jī)把他們分配給集群中其他服務(wù)器
④停止RegionServer進(jìn)程?


4.增加Master備份節(jié)點(diǎn)

為了增加HBase集群的可用性,可以為HBase增加多個(gè)備份Master吗坚。當(dāng)Master掛掉后祈远,備份Master可以自動(dòng)接管整個(gè)HBase的集群
·HBase的conf下增加文件backup-masters,
· 啟動(dòng)hbase-damon.sh start 命令
? ? 當(dāng)集群啟動(dòng)時(shí)商源,所有進(jìn)程都會(huì)去競(jìng)爭作為主Master來提供服務(wù)车份,其他Master會(huì)輪詢檢測(cè)當(dāng)前主Master是否失效;如果失效牡彻,則會(huì)觸發(fā)新的Master選舉


數(shù)據(jù)管理-數(shù)據(jù)導(dǎo)出

數(shù)據(jù)導(dǎo)出


數(shù)據(jù)導(dǎo)入


數(shù)據(jù)遷移


故障管理

hbck原理:
·掃描.META.表收集所有的相關(guān)信息
·掃描HDFS中的root目錄
·比較收集的信息來報(bào)告 相關(guān)的一致性和完整性問題

一致性檢測(cè):Region是否同時(shí)存在于.META.表和HDFS中扫沼,并檢查是否只被指派給唯一的RegionServer。

完整性檢測(cè):以表為單位讨便,將Region與表細(xì)節(jié)信息進(jìn)行比較以找到缺失的Region充甚,同時(shí)也會(huì)檢查region的起止鍵范圍中的空洞或重疊情況。


?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末霸褒,一起剝皮案震驚了整個(gè)濱河市伴找,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌废菱,老刑警劉巖技矮,帶你破解...
    沈念sama閱讀 206,968評(píng)論 6 482
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異殊轴,居然都是意外死亡衰倦,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,601評(píng)論 2 382
  • 文/潘曉璐 我一進(jìn)店門旁理,熙熙樓的掌柜王于貴愁眉苦臉地迎上來樊零,“玉大人,你說我怎么就攤上這事∽そ螅” “怎么了夺艰?”我有些...
    開封第一講書人閱讀 153,220評(píng)論 0 344
  • 文/不壞的土叔 我叫張陵,是天一觀的道長沉衣。 經(jīng)常有香客問我郁副,道長,這世上最難降的妖魔是什么豌习? 我笑而不...
    開封第一講書人閱讀 55,416評(píng)論 1 279
  • 正文 為了忘掉前任存谎,我火速辦了婚禮,結(jié)果婚禮上肥隆,老公的妹妹穿的比我還像新娘既荚。我一直安慰自己,他們只是感情好巷屿,可當(dāng)我...
    茶點(diǎn)故事閱讀 64,425評(píng)論 5 374
  • 文/花漫 我一把揭開白布固以。 她就那樣靜靜地躺著,像睡著了一般嘱巾。 火紅的嫁衣襯著肌膚如雪憨琳。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 49,144評(píng)論 1 285
  • 那天旬昭,我揣著相機(jī)與錄音篙螟,去河邊找鬼。 笑死问拘,一個(gè)胖子當(dāng)著我的面吹牛遍略,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播骤坐,決...
    沈念sama閱讀 38,432評(píng)論 3 401
  • 文/蒼蘭香墨 我猛地睜開眼绪杏,長吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來了纽绍?” 一聲冷哼從身側(cè)響起蕾久,我...
    開封第一講書人閱讀 37,088評(píng)論 0 261
  • 序言:老撾萬榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎拌夏,沒想到半個(gè)月后僧著,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 43,586評(píng)論 1 300
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡障簿,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,028評(píng)論 2 325
  • 正文 我和宋清朗相戀三年盹愚,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片站故。...
    茶點(diǎn)故事閱讀 38,137評(píng)論 1 334
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡皆怕,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情端逼,我是刑警寧澤朗兵,帶...
    沈念sama閱讀 33,783評(píng)論 4 324
  • 正文 年R本政府宣布污淋,位于F島的核電站顶滩,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏寸爆。R本人自食惡果不足惜礁鲁,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,343評(píng)論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望赁豆。 院中可真熱鬧仅醇,春花似錦、人聲如沸魔种。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,333評(píng)論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽节预。三九已至叶摄,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間安拟,已是汗流浹背蛤吓。 一陣腳步聲響...
    開封第一講書人閱讀 31,559評(píng)論 1 262
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留糠赦,地道東北人会傲。 一個(gè)月前我還...
    沈念sama閱讀 45,595評(píng)論 2 355
  • 正文 我出身青樓,卻偏偏與公主長得像拙泽,于是被迫代替她去往敵國和親淌山。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 42,901評(píng)論 2 345

推薦閱讀更多精彩內(nèi)容