環(huán)境
- ubuntu kylin 14.04
- Hadoop 2.7.2
- Hive 1.2.1
mysql 安裝與配置
- 安裝 mysql
sudo apt-get install cmake libncurses5-dev
sudo apt-get install mysql-server mysql-client -y
中途會(huì)彈出窗口要求用戶輸入 mysql 的 root 密碼
創(chuàng)建數(shù)據(jù)庫(kù)
mysql -u root -p
# 登錄 mysql
CREATE DATABASE hivedb;
# 創(chuàng)建數(shù)據(jù)庫(kù) hivedb創(chuàng)建用戶并授權(quán)
在 mysql 界面輸入以下命令:
CREATE USER 'hive'@'localhost' IDENTIFIED BY 'hive';
grant all privileges on *.* to 'hive'@'localhost' identified by 'hive';
flush privileges;
Hive 安裝與配置
安裝 Hive 1.2.1
wget http://mirror.bit.edu.cn/apache/hive/stable/apache-hive-1.2.1-bin.tar.gz
tar -zxvf apache-hive-1.2.1-bin.tar.gz
# 解壓
mv apache-hive-1.2.1-bin hive-1.2.1
# 重命名-
配置環(huán)境變量
我的hive安裝目錄在/home/hadoop/hive-1.2.1
vim ~/.bashrc
# 編輯此配置文件
export HIVE_HOME=/home/hadoop/hive-1.2.1
# 在文件開頭添加此行
在 PATH 和 CLASSPATH 中添加 hive,最終~/.bashrc
環(huán)境變量如圖:
~/.bashrc設(shè)置截圖 修改 hive-env.sh
cd hive-1.2.1/conf
# 切換到配置文件目錄
cp hive-env.sh.template hive-env.sh
# 復(fù)制模板
vim hive-env.sh
# 編輯配置文件
HADOOP_HOME=/home/hadoop/hadoop-2.7.2
# 設(shè)置 HADOOP_HOME路徑修改 hive-site.xml
cp hive-default.xml.template hive-site.xml
# 復(fù)制模板
vim hive-site.xml
# 編輯配置文件
<property>
<name>javax.jdo.option.ConnectionURL</name>
<value>jdbc:mysql://localhost:3306/hivedb?createDatabaseIfNotExit=true</value>
<description>JDBC connect string for a JDBC metastore</description>
</property>
<property>
<name>javax.jdo.option.ConnectionDriverName</name>
<value>com.mysql.jdbc.Driver</value>
<description>Driver class name for a JDBC metastore</description>
</property>
<property>
<name>javax.jdo.option.ConnectionUserName</name>
<value>hive</value>
<description>Username to use against metastore database</description>
</property>
<property>
<name>javax.jdo.option.ConnectionPassword</name>
<value>hive</value>
<description>password to use against metastore database</description>
</property>
<property>
<name>hive.exec.local.scratchdir</name>
<value>/home/hadoop/hive-1.2.1/tmp</value>
<description>Local scratch space for Hive jobs</description>
</property>
<property>
<name>hive.downloaded.resources.dir</name>
<value>/home/hadoop/hive-1.2.1/tmp/resources</value>
<description>Temporary local directory for added resources in the remote file system.</description>
</property>
這個(gè)配置文件內(nèi)容比較多侨颈,建議用查找搜索配置選項(xiàng)
- 創(chuàng)建臨時(shí)目錄
cd ~/hive-1.2.1
mkdir -p tmp/resources
其他設(shè)置
添加 mysql JDBC驅(qū)動(dòng)
wget http://dev.mysql.com/get/Downloads/Connector-J/mysql-connector-java-5.1.39.tar.gz
tar -zxvf mysql-connector-java-5.1.39.tar.gz
# 解壓
cp mysql-connector-java-5.1.39/mysql-connector-java-5.1.39-bin.jar ~/hive-1.2.1/lib
替換 jline.jar 包
cp ~/hive-1.2.1/lib/jline-2.12.jar ~/hadoop-2.7.2/share/hadoop/yarn/
關(guān)閉防火墻
service iptables stop
chkconfig iptables off
關(guān)閉 selinux
修改/etc/selinux/conf
SELINUX=disabled
重啟生效
運(yùn)行測(cè)試
啟動(dòng) Hadoop
./hadoop-2.7.2/sbin/start-all.sh
-
啟動(dòng) Hive
hive
# 輸入命令測(cè)試
hive測(cè)試
總結(jié)
安裝過(guò)程遇到了如下錯(cuò)誤:
- 錯(cuò)誤分析
- 沒有安裝 mysql JDBC 驅(qū)動(dòng)
- mysql 沒有添加 hive 用戶
- 沒有啟動(dòng) Hadoop
以上錯(cuò)誤屬于粗心,大家不要學(xué)我 orz