linux安装Hive-单机/伪分布（图文详细版）

红太狼 2023-09-23 21:31 21阅读 0赞

## linux安装Hive-单机 ##

#### 安装hadoop和hbase参照博主另外的文章 ####

hadoop单机/伪分布：
    https://blog.csdn.net/qq_46138492/article/details/128582599
    
    Hbase单机/伪分布：
    https://blog.csdn.net/qq_46138492/article/details/128583816

### 0、官网下载 ###

[下载 (apache.org)](https://hive.apache.org/downloads.html)
    
    [历史版本 (apache.org)](https://dlcdn.apache.org/hive/)

### 2、上传包文件 ###

*  用工具上传
 *  命令：`scp -r apache-hive-3.1.3-bin.tar.gz user@192.168.10.128:/home/user/src`

#### 3、准备工作 ####

解压：`tar -zxvf apache-hive-3.1.3-bin.tar.gz`

创建文件夹：`sudo mkdir /usr/local/hive`

移动：`sudo mv apache-hive-3.1.3-bin /usr/local/hive/`

改名：

cd /usr/local/hive/
    sudo mv apache-hive-3.1.3-bin apache-hive-3.1.3

#### 4、安装Mysql ####

**推荐在线安装 mysql 服务，教程在博主的另一篇文章**

#### 5、创建hive用户,数据库等 ####

`mysql -uroot -p12345678`

create database hive;
    #创建hive用户名密码
    use mysql;
    CREATE USER 'hive'@'%' IDENTIFIED BY '12345678';
    Grant all privileges on *.* to 'hive'@'%' with grant option; //赋权
    flush privileges;

## 设置hive ##

#### 添加hive环境 ####

`sudo vim /etc/profile`

export Hive_HOME=/usr/local/hive/apache-hive-3.1.3
    export PATH=$PATH:$Hive_HOME/bin
    #环境变量生效
    source /etc/profile

#### 配置 Hive ####

先赋值目录

cd /usr/local/hive/apache-hive-3.1.3/conf/
    cp hive-env.sh.template hive-env.sh 
    cp hive-default.xml.template hive-site.xml 
    cp hive-log4j2.properties.template hive-log4j2.properties 
    cp hive-exec-log4j2.properties.template hive-exec-log4j2.properties

**hive-env.sh**

export JAVA_HOME=/usr/local/jdk/jdk1.8.0_351
    export HADOOP_HOME=/usr/local/hadoop/hadoop-3.1.3
    export HIVE_HOME=/usr/local/hive/apache-hive-3.1.3
    export HIVE_CONF_DIR=$HIVE_HOME/conf

**hive-site.xml中配置**

<configuration>
        <property>
        	
            <name>javax.jdo.option.ConnectionUserName</name>
            <value>hive</value>
        </property>
        <property>
        
            <name>javax.jdo.option.ConnectionPassword</name>
            <value>12345678</value>
        </property>
       <property>
       
            <name>javax.jdo.option.ConnectionURL</name>mysql
            <value>jdbc:mysql://192.168.10.128:3306/hive?useSSL=false&allowPublicKeyRetrieval=true&characterEncoding=UTF-8&createDatabaseIfNotExist=true
    </value>
        </property>
        <property>
        
            <name>javax.jdo.option.ConnectionDriverName</name>
            <value>com.mysql.cj.jdbc.Driver</value>
        </property>
           <property>
            <name>hive.support.concurrency</name>
        <value>true</value>
     </property>
    </configuration>

下载mysql的驱动到hive的lib目录

`mv mysql-connector-java-8.0.28.jar /usr/local/hive/apache-hive-3.1.3/lib/`

**hive-site.xml中添加如下配置**

<property>
        <name>system:java.io.tmpdir</name>
        <value>/usr/local/hive/apache-hive-3.1.3/tmp/java</value>
      </property>
      <property>
        <name>system:user.name</name>
        <value>${user.name}</value>
      </property>

创建所需要的目录

`sudo mkdir -p /usr/local/hive/apache-hive-3.1.3/tmp/java`

#### 删除log4j-slf4j ####

hadoop的comment/lib下有个log4j-slf4j。 hive的lib下也有一个log4j-slf4j。  
当你配置完环境变量后，hive就会找到两个这样的文件，于是他就不知道用那个了。然后便报错。  
不过，需要注意的是，你只可以删hive的slf4j-log4j！因为删了hadoop的log4j-slf4j在你start-dfs.sh的时候会报错！  
`sudo mv /usr/local/hive/apache-hive-3.1.3/lib/log4j-slf4j-impl-*.jar /root/log4j-slf4j-backup.jar`

#### 初始化 ####

cd /usr/local/hive/apache-hive-3.1.3
    ./bin/schematool -dbType mysql -initSchema

***此处报错 java.lang.NoSuchMethodError: com.google.common.base.Preconditions.checkArgument(ZLjava/lang/String;Ljava/lang/Object;)***

解决方法：删除hive中低版本的guava-*.jar包，将hadoop中的guava-*\-jre.jar复制到hive的lib目录下即可\*\*

cd /usr/local/hive/apache-hive-3.1.3/lib
    rm guava-*.jar
    cd /usr/local/hadoop/hadoop-3.1.3/share/hadoop/common/lib 
    cp guava-*-jre.jar /usr/local/hive/apache-hive-3.1.3/lib

#### 开启hive ####

hive

## 配置完成啦！！！！ ##