MapReduce訪問Hbase
Mapreduce訪問hbase數(shù)據(jù)作分析一定是在離線分析的場景下應(yīng)用。
Hbase MapReduce核心類
1.MapReduce基本編程模型
通過Mapper和Reducer來處理KV對,Mapper的輸出經(jīng)Shuffle及Sort后變?yōu)镽educer的輸入
2.核心類
InputFormat和OutputFormat澈缺,定義了Map-Reduce的輸入和輸出相關(guān)的東西。HBase通過對這些類的擴展(繼承)來方便MapReduce任務(wù)來讀寫HTable中的數(shù)據(jù)叁鉴。
案例
1.Hbase表數(shù)據(jù)轉(zhuǎn)移
2.從Hbase中讀取數(shù)據(jù)绵咱、分析备蚓,寫入hdfs
3.MapReduce從HDFS讀取數(shù)據(jù)存儲到HBase中
參考:http://www.reibang.com/p/53864dc3f7b4
https://www.cnblogs.com/Transkai/p/10748536.html
http://www.reibang.com/p/1dabb1a7374f
https://www.cnblogs.com/qingyunzong/p/8681490.html
感謝以上參考文章作者提供的幫助空幻!此博客只是作一個簡單的筆記歸納烁峭!再次感謝!