CentOS6.5上hive安裝過程與常見錯誤除錯

阿新 • • 發佈：2019-02-05

CentOS6.5上hive安裝過程

準備：已安裝hadoop，這裡我使用hadoop-2.6.0單進偽分散式，將hive安裝在hadoop使用者下

第一部分：安裝配置mysql

1.確保系統中已安裝了MySQL，可以先嚐試啟動MySQL服務，一般在root許可權下啟動
service mysqld start
若顯示：mysqld: unrecognized service則是mysql沒有安裝，在這裡我選擇用yum命令安裝mysql
yum -y install mysql-server mysql mysql-devel
命令將：mysql-server、mysql、mysql-devel都安裝好，當結果顯示為“Complete！”即安裝完畢。
詳細過程：http://jingyan.baidu.com/article/c74d600079be530f6a595dc3.html

2.進入MySQL，一定先啟動mysql，否則會報錯：

ERROR 2002 (HY000): Can't connect to local MySQL server through socket '/var/lib/mysql/mysql.sock' (2)

mysql -uroot -p 密碼預設為空

3.配置HIVE元資料庫，以及建立使用者名稱，分配網路訪問許可權。
insert into mysql.user(Host,User,Password) values("hadoop","hive",password("hive"));
create database hive;
grant all on hive.* to [email protected]

'%' identified by 'hive';
grant all on hive.* to [email protected]'localhost' identified by 'hive';
grant all on hive.* to [email protected]'hadoop' identified by 'hive';
flush privileges;

4.mysql -uhive -p
show databases;
use hive;
create table test (name int);
show tables;
drop table test;

第二部分：安裝配置hive
1.匯入hive安裝包，在/home/hadoop目錄下，解壓縮
tar -zxvf apache-hive-1.2.1-bin.tar.gz
mv apache-hive-1.2.1-bin hive

2.配置環境變數，在hadoop使用者下，配置.bash_profile
CLASSPATH=.:$JAVA_HOME/lib:$HADOOP_HOME/lib:/home/hadoop/hive/lib
HIVE_HOME=/home/hadoop/hive
PATH=$PATH:$HIVE_HOME/bin
配置好後source .bash_profile,用echo $HIVE_HOME命令,若顯示/home/hadoop/hive，則配置正確。

3.配置hive-site.xml和hive-env.sh.template兩個檔案,hive-site.xml檔案沒有，需要自己複製出來
cd /home/hadoop/hive/conf
cp hive-default.xml.template hive-site.xml

vim hive-site.xml，可以輸入:/javax/來快速定位

<property>
<name>javax.jdo.option.ConnectionPassword</name>
<value>hive</value>
<description>password to use against metastore database</description>
</property>

<property>
<name>javax.jdo.option.ConnectionURL</name>
<value>jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true</value>
<description>JDBC connect string for a JDBC metastore</description>
</property>

<property>
<name>javax.jdo.option.ConnectionUserName</name>
<value>hive</value>
<description>Username to use against metastore database</description>
</property>

<property>
<name>javax.jdo.option.ConnectionDriverName</name>
<value>com.mysql.jdbc.Driver</value>
<description>Driver class name for a JDBC metastore</description>
</property>

vim hive-env.sh.template

# Set HADOOP_HOME to point to a specific hadoop install directory
HADOOP_HOME=/home/hadoop/hadoop/hadoop-2.6.0

# Hive Configuration Directory can be controlled by:
export HIVE_CONF_DIR=/home/hadoop/hive/conf

4.將mysql-connector-java-5.1.22-bin.jar匯入/hive/lib中，不匯入會報錯

5.故障處理1：報錯Exception in thread "main" java.lang.RuntimeException: java.lang.IllegalArgumentException:

java.net.URISyntaxException: Relative path in absolute URI: ${system:java.io.tmpdir%7D/$%7Bsystem:user.name%7D

解決辦法：
在hive下建立臨時IO的tmp資料夾。然後將路徑配置到hive-site.xml的下列引數中
<property>
<name>hive.querylog.location</name>
<value>/home/hadoop/hive/iotmp</value>
<description>Location of Hive run time structured log file</description>
</property>

<property>
<name>hive.exec.local.scratchdir</name>
<value>/home/hadoop/hive/iotmp</value>
<description>Local scratch space for Hive jobs</description>
</property>

<property>
<name>hive.downloaded.resources.dir</name>
<value>/home/hadoop/hive/iotmp</value>
<description>Temporary local directory for added resources in the remote file system.</description>
</property>

故障處理2：報錯[ERROR] Terminal initialization failed; falling back to unsupported

java.lang.IncompatibleClassChangeError: Found class jline.Terminal, but interface was expected

解決辦法：
將hive下的新版本jline的JAR包拷貝到hadoop下：
cp /hive/apache-hive-1.1.0-bin/lib/jline-2.12.jar /home/hadoop/hadoop-2.6.0/share/hadoop/yarn/lib
-rw-r--r-- 1 root root 87325 Mar 10 18:10 jline-0.9.94.jar.bak
-rw-r--r-- 1 root root 213854 Mar 11 22:22 jline-2.12.jar

6.啟動hadoop,此處我是使用偽分散式，所以要先進入hadoop-2.6.0目錄下
sbin/start-all.sh

之後，可以啟動hive
hive
或 hive -hiveconf hive.root.logger=DEBUG,console 輸出bug，顯示在控制檯
或 hive --hiveconf hive.cli.print.current.db=true 同時啟動資料庫

CentOS6.5上hive安裝過程與常見錯誤除錯

CentOS6.5上hive安裝過程與常見錯誤除錯

CentOS6上編譯安裝gcc8.1版本全過程記錄（包括排坑與常見錯誤解決）

centos6.5上安裝使用xtrabackup

centos6.5上安裝sonarqube6.7.5

在CentOS6.5上安裝/啟動PostgreSQL

CentOS6.5下Redis安裝與配置

RedHat6.5安裝MySQL5.6及解除安裝MySQL5.6（安裝解除安裝過程及常見問題解決）

CentOS6.5 上的Icehouse 版本devstack 一鍵安裝

CentOS6.5升級手動安裝GCC4.8.2

centos6.5下yum安裝mysql5.5

mysql 5.7最新安裝過程以及添加環境變量

CentOS6.5 上crontab每天自動備份mysql數據庫

Linux CentOS6.5上搭建環境遇到的問題

【CentOS6.5】MySQL安裝和配置

centos6.5 使用 rpm 安裝 mysql

CentOS6.5下nginx安裝

CentOS6.5下Cloudera安裝搭建部署大數據集群（圖文分五大步詳解）（博主強烈推薦）

gitlab管理之一---gitlab在Centos 7.5上面的安裝

XEN虛擬化簡介及XEN在CentOS 6.5上的安裝

最小化安裝的centos7.5上編譯安裝git2.19

CentOS6.5上hive安裝過程與常見錯誤除錯

相關推薦