今天剛到公司沦寂，想跑一個復(fù)雜的mapreduce嗜侮，結(jié)果剛打開電腦就傻眼了芹缔，兩個datanode全掛了蚌堵，原因是磁盤容量不足亏钩，20G全用完了剑肯，好家伙捧毛，...

hdfs會對寫入的所有數(shù)據(jù)計算校驗和，在數(shù)據(jù)通過不可靠通道傳輸?shù)臅r候再次計算校驗和让网，對比就能發(fā)現(xiàn)數(shù)據(jù)是否損壞呀忧，常用的通過32位循環(huán)冗余校驗，在h...

這次嘗試區(qū)分器的使用很多證件的號碼會根據(jù)前綴的幾個字符來確定一些信息，比如省份等丸凭，手機號也有這樣的特征福扬，通過前綴來區(qū)分是移動還是電信聯(lián)通等，將號...

本次嘗試自定義輸出類型手機流量分為上傳流量和下載流量惜犀，統(tǒng)計的時候需要得到的結(jié)果表示為（手機號 上傳流量 下載流量 總流量）例如（13333333...

本機開發(fā)mapreduce铛碑，然后打包上傳到hadoop服務(wù)器 一、入門wordcount1虽界、新建maven項目汽烦，pom.xml內(nèi)容： 然后創(chuàng)建源...