為了使用spark 的基于mesos的集群方式, 需要安裝mesos, 網(wǎng)上教程很多宗苍,但感覺有些繁瑣,其實(shí)說起來也就幾步而已薄榛。
下載mvn, 并建立軟連接
wget http://mirror.nexcess.net/apache/maven/maven-3/3.0.5/binaries/apache-maven-3.0.5-bin.tar.gz
sudo tar -zxf apache-maven-3.0.5-bin.tar.gz -C /opt/
sudo ln -s /opt/apache-maven-3.0.5/bin/mvn /usr/bin/mvn
yum直接安裝各種依耐包
sudo yum install -y python-devel java-1.7.0-openjdk-devel zlib-devel libcurl-devel openssl-devel cyrus-sasl-devel cyrus-sasl-md5 apr-devel subversion-devel apr-util-devel gcc-g++
下載mesos源碼包
http://archive.apache.org/dist/mesos/0.21.0/mesos-0.21.0.tar.gz (下載這個版本主要是為了匹配spark 1.6.1)
解壓該源碼包并執(zhí)行編譯讳窟、安裝(在編譯階段會去下載大量的包, 整個過程 一般得20~30 分鐘)