準備 準備3臺客戶機痘煤，（關閉防火墻鸳吸、靜態(tài)IP、主機名稱）速勇，配置ssh晌砾。我配置了4臺； 安裝JDK烦磁，配置JAVA_HOME環(huán)境變量养匈； 安裝Hadoop, 配置HADOOP_HO...
發(fā)簡信
IP屬地：廣東
-
Hadoop集群部署 -
Hadoop筆記規(guī)劃
歡迎大家閱讀、留言都伪、評論呕乎。 準備工作 Linux安裝及其靜態(tài)IP配置，安裝JDK與Tomcat[http://www.reibang.com/p/402df6a607d3]...
-
一陨晶、初識Hadoop
Hadoop是一個由Apache基金會所開發(fā)的分布式系統(tǒng)基礎架構猬仁。用戶可以在不了解分布式底層細節(jié)的情況下帝璧，開發(fā)分布式程序。充分利用集群的威力進行高速運算和存儲湿刽。Hadoop實...
-
二的烁、HDFS 概述與基本使用
HDFS 作為最早的大數(shù)據(jù)存儲系統(tǒng)，存儲著寶貴的數(shù)據(jù)資產(chǎn)诈闺，各種新的算法渴庆、框架要想得到人們的廣泛使用，必須支持 HDFS 才能獲取已經(jīng)存儲在里面的數(shù)據(jù)雅镊。所以大數(shù)據(jù)技術越發(fā)展襟雷，新...
-
三、MapReduce編程模型與計算框架MapReduce 既是一個編程模型仁烹，又是一個計算框架耸弄。也就是說，開發(fā)人員基于 MapReduce 編程模型進行編程開發(fā)卓缰，然后將程序通過 MapReduce 計算框架分發(fā)到 ...
-
-
寫幾個好用的Linux腳本
xsync 集群通常需要同步配置文件胧砰，是不是可以寫個腳本快速同步配置文件呢鳍鸵？這里 xsync 腳本是基于 rsync 的。相對于scp尉间，rsync做文件夾復制時速度更快偿乖，因為...
-
大數(shù)據(jù)前序時至今日，計算機軟件成為人們日常生活的必備品哲嘲。能用計算機軟件提高效率的地方贪薪，幾乎已經(jīng)被全部發(fā)掘過了。在這種情況下眠副，如果想讓軟件再成百上千倍地提高我們的生活和工作效率画切，使用以前...
-
CentOS8虛擬機之間的通信虛擬機之間的通信 ssh認證 免密登錄 通過主機名實現(xiàn)ssh連接 更加簡單的同步 rsync 與其二次封裝的 xsync 學習大數(shù)據(jù)，配置集群時囱怕，需要先讓虛擬機之間能夠自由通...