Hive 1.2.1 本地模式安裝筆記

環(huán)境

  • ubuntu kylin 14.04
  • Hadoop 2.7.2
  • Hive 1.2.1

mysql 安裝與配置

  1. 安裝 mysql
sudo apt-get install cmake libncurses5-dev
sudo apt-get install mysql-server mysql-client -y

中途會彈出窗口要求用戶輸入 mysql 的 root 密碼

  1. 創(chuàng)建數(shù)據(jù)庫
    mysql -u root -p # 登錄 mysql
    CREATE DATABASE hivedb; # 創(chuàng)建數(shù)據(jù)庫 hivedb

  2. 創(chuàng)建用戶并授權(quán)
    在 mysql 界面輸入以下命令:

CREATE USER 'hive'@'localhost' IDENTIFIED BY 'hive';
grant all privileges on *.* to 'hive'@'localhost' identified by 'hive';
flush privileges;

Hive 安裝與配置

  1. 安裝 Hive 1.2.1
    wget http://mirror.bit.edu.cn/apache/hive/stable/apache-hive-1.2.1-bin.tar.gz
    tar -zxvf apache-hive-1.2.1-bin.tar.gz # 解壓
    mv apache-hive-1.2.1-bin hive-1.2.1 # 重命名

  2. 配置環(huán)境變量
    我的hive安裝目錄在/home/hadoop/hive-1.2.1
    vim ~/.bashrc # 編輯此配置文件
    export HIVE_HOME=/home/hadoop/hive-1.2.1 # 在文件開頭添加此行
    在 PATH 和 CLASSPATH 中添加 hive,最終~/.bashrc環(huán)境變量如圖:

    ~/.bashrc設(shè)置截圖

  3. 修改 hive-env.sh
    cd hive-1.2.1/conf # 切換到配置文件目錄
    cp hive-env.sh.template hive-env.sh # 復制模板
    vim hive-env.sh # 編輯配置文件
    HADOOP_HOME=/home/hadoop/hadoop-2.7.2 # 設(shè)置 HADOOP_HOME路徑

  4. 修改 hive-site.xml
    cp hive-default.xml.template hive-site.xml # 復制模板
    vim hive-site.xml # 編輯配置文件

<property>
       <name>javax.jdo.option.ConnectionURL</name>
       <value>jdbc:mysql://localhost:3306/hivedb?createDatabaseIfNotExit=true</value>
       <description>JDBC connect string for a JDBC metastore</description>
   </property>
<property>
      <name>javax.jdo.option.ConnectionDriverName</name>
      <value>com.mysql.jdbc.Driver</value>
      <description>Driver class name for a JDBC metastore</description>
  </property>
<property>
      <name>javax.jdo.option.ConnectionUserName</name>
      <value>hive</value>
      <description>Username to use against metastore database</description>
  </property>
<property>
      <name>javax.jdo.option.ConnectionPassword</name>
      <value>hive</value>
      <description>password to use against metastore database</description>
  </property>
<property>
      <name>hive.exec.local.scratchdir</name>
      <value>/home/hadoop/hive-1.2.1/tmp</value>
      <description>Local scratch space for Hive jobs</description>
  </property>
<property>
      <name>hive.downloaded.resources.dir</name>
      <value>/home/hadoop/hive-1.2.1/tmp/resources</value>
      <description>Temporary local directory for added resources in the remote file system.</description>
  </property>

這個配置文件內(nèi)容比較多,建議用查找搜索配置選項

  1. 創(chuàng)建臨時目錄
    cd ~/hive-1.2.1
    mkdir -p tmp/resources

其他設(shè)置

  • 添加 mysql JDBC驅(qū)動
    wget http://dev.mysql.com/get/Downloads/Connector-J/mysql-connector-java-5.1.39.tar.gz
    tar -zxvf mysql-connector-java-5.1.39.tar.gz # 解壓
    cp mysql-connector-java-5.1.39/mysql-connector-java-5.1.39-bin.jar ~/hive-1.2.1/lib

  • 替換 jline.jar 包
    cp ~/hive-1.2.1/lib/jline-2.12.jar ~/hadoop-2.7.2/share/hadoop/yarn/

  • 關(guān)閉防火墻
    service iptables stop
    chkconfig iptables off

關(guān)閉 selinux
修改/etc/selinux/conf
SELINUX=disabled
重啟生效


運行測試

  • 啟動 Hadoop
    ./hadoop-2.7.2/sbin/start-all.sh

  • 啟動 Hive
    hive # 輸入命令測試

    hive測試


總結(jié)

安裝過程遇到了如下錯誤:

錯誤截圖1

錯誤截圖2
  • 錯誤分析
  1. 沒有安裝 mysql JDBC 驅(qū)動
  1. mysql 沒有添加 hive 用戶
  2. 沒有啟動 Hadoop

以上錯誤屬于粗心,大家不要學我 orz

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時請結(jié)合常識與多方信息審慎甄別。
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容