多用户模式Hive安装

Hive版本: 1.2.1 MySQL connector版本：5.1.32

一. Hive搭建模式

• local模式 此模式连接到一个In-memory的数据库Derby，一般用于Unit Test

• 单用户模式 通过网络连接到一个数据库中（通常是Mysql），是最经常使用到的模式

• 多用户模式 用于非Java客户端访问元数据库，在服务器端启动MetaStoreServer，客户端利用Thrift协议通过MetaStoreServer访问元数据库

二. 多用户模式安装配置

集群规划

在hadoop3和hadoop4上安装hive

#! 解压hive到指定目录
tar zxvf apache-hive-1.2.1-bin.tar.gz -C /usr/local
#! 修改配置文件
vi /etc/profile
#! 在profile文件中添加如下内容
export HIVE_HOME=/usr/local/apache-hive-1.2.1-bin
export PATH=$PATH:$HIVE_HOME/bin

配置hadoop3（MetaStore Server）

• 进入$HIVE_HOME下的conf目录，修改hive-site.xml文件

    <configuration>
      <property>
        <name>hive.metastore.warehouse.dir</name>
        <value>/user/hive/warehouse</value>
      </property>
      <property>
        <name>javax.jdo.option.ConnectionURL</name>
        <value>jdbc:mysql://hadoop1:3306/hive?createDatabaseIfNotExist=true</value>
      </property>
      <property>
        <name>javax.jdo.option.ConnectionDriverName</name>
        <value>com.mysql.jdbc.Driver</value>
      </property>
      <property>
        <name>javax.jdo.option.ConnectionUserName</name>
        <value>root</value>
      </property>
      <property>
        <name>javax.jdo.option.ConnectionPassword</name>
        <value>MyNewPass4!</value>
      </property>
    </configuration>
  

• 拷贝mysql连接驱动到HIVE_HOME/lib目录下 cp /root/mysql-connector-java-5.1.32-bin.jar $HIVE_HOME/lib

配置hadoop4（MetaStore Client）

• 进入$HIVE_HOME下的conf目录，修改hive-site.xml文件

    <configuration>
      <property>
        <name>hive.metastore.warehouse.dir</name>
        <value>/user/hive/warehouse</value>
      </property>
      <property>
        <name>hive.metastore.local</name>
        <value>false</value>
      </property>
      <property>
        <name>hive.metastore.uris</name>
        <value>thrift://hadoop3:9083</value>
      </property>
    </configuration>
  

• 删除$HADOOP_PREFIX/share/hadoop/yarn/lib目录下的jline jar包，将$HIVE_HOME/lib下的jline jar包复制过去

  cd /usr/local/hadoop-2.6.5/share/hadoop/yarn/lib
  rm jline*.jar
  cp /usr/local/apache-hive-1.2.1-bin/lib/jline-2.12.jar .
  

• ← Previous Post
• Next Post →