Hive-2.1.1安装教程

爱被打了一巴掌 2022-10-02 03:55 128阅读 0赞

[2019独角兽企业重金招聘Python工程师标准>>> ][2019_Python_] ![hot3.png][]

**Hive2安装详解**

1. 解压hive安装包

Tar -zxvf apache-hive-2.1.1-bin.tar.gz

2. 安装mysql，使用yum命令自动安装

将mysql的connector到hive的lib目录下

启动MySQL，service mysqld start

修改mysql密码：

Mysql -u root

Use mysql;

Update user set password=password(‘newpass’) where user=’root’;

Flush privileges;

Grant all privileges \*.\* to ‘root’%’ identified by ‘newpass’ with grant optiomn;

FLUSH PRIVILEGES;

3. 配置环境变量

Vim /etc/profile

\#\#\#\#\#\#\#\#\#\#\#\#\#\#\#\#HIVE

export HIVE\_HOME=/home/zhouwang/apache-hive-2.1.1-bin

export HIVE\_CONF\_HOME=$HIVE\_HOME/conf

export PATH=:$PATH:$HIVE\_HOME/bin

4. 配置hive，conf/hive-site.xml

进入conf目录，将原有的文件重命名

cp hive-env.sh.template hive-env.sh

cp hive-default.xml.template hive-site.xml

cp hive-log4j2.properties.template hive-log4j2.properties

cp hive-exec-log4j2.properties.template hive-exec-log4j2.properties

修改的hive-site.xml

1. hive.downloaded.resources.dir

2. hive.server2.logging.operation.log.location

`3.`javax.jdo.option.ConnectionURL=>`jdbc:mysql://192.168.56.101:3306/hive?createDatabaseIfNotExist=true`

4. javax.jdo.option.ConnectionDriverName=>com.mysql.jdbc.Driver

5. javax.jdo.option.ConnectionUserName

6. javax.jdo.option.ConnectionPassword

7. hive.metastore.schema.verification=>false

8. hive.metastore.warehouse.dir=>/user/hive/warehouse

9. hive.server2.thrift.port=>10000（默认有可能冲突）

10. hive.metastore.uris=>thrift://node1:9083

11. hive.querylog.location=>/user/hive/log

12. hive.exec.scratchdir=>/user/hive/tmp

hive.metastore.schema.verification

hive.metastore.uris 这两个参数是配置远程matestore的，要启动hiveserver2必须要配置此参数

将所有$\{system:user.name\}替换为自己的用户名XX，将所有$\{system:java.io.tmpdir\}替换为/zhouwang/apache-hive-2.1.1-bin/tmp

5. 修改hive-env.sh

加入

export HADOOP\_HOME=/home/zhouwang/hadoop-2.7.4

export HIVE\_CONF\_DIR=/home/zhouwang/apache-hive-2.1.1/conf

export HIVE\_AUX\_JARS\_PATH=/home/zhouwangl/apache-hive-2.1.1/lib

6. 使用Hadoop新建hdfs目录

Hadoop fs -mkdir -p /user/hive/warehouse

Hadoop fs -mkdir -p /user/hive/tmp

Hadoop fs -mkdir -p /user/hive/log

Hadoop fs -chmod -R 777 /user/hive

7. 对mysql数据库机型初始化

Schematool -initSchema -dbType mysql

8. 启动远程服务

Hive --service metastore &

Hive –service hiveserver2 &

9. 所遇问题

Beeline连接hiveserver2的时候出现java.lang.RuntimeException: org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.security.authorize.AuthorizationException): User zhouwang is not allowed to impersonate anonymous.

需要在hadoop配置文件core-site.xml中加入如下配置项：

<property>

<name>hadoop.proxyuser.zhouwang.hosts</name>

<value>\*</value>

</property>

<property>

<name>hadoop.proxyuser.zhouwang.groups</name>

<value>\*</value>

</property>

Hadoop.proxyuser.zhouwang.hosts配置项名称中zhouwang部分为报错User中的用户名部分.

转载于:https://my.oschina.net/zhouwang93/blog/1822649

[2019_Python_]: https://my.oschina.net/u/2663968/blog/3061697
[hot3.png]: /images/20220113/9fbdc80769f74c04ad478ff1e32c9c0b.png

发表评论取消回复

表情：

评论列表（有 0 条评论，128人围观）

还没有评论，来说两句吧...

相关阅读

相关 25.211相关

[中兴-WCDMA系统原理（HSDPA HSUPA入门知识）][-WCDMA_ _HSDPA HSUPA] [ ][-WCDMA_ _HSDPA HSUPA] ...

た入场券/ 2024年04月19日 14:14/ 0 赞/ 52 阅读

相关 Hadoop Hive Sqoop安装教程

文章目录前提条件 1 关闭防火墙&清空规则安装包说明 3 JDK安装 3.1 指定安装目录为/usr/java 3.

ゞ浴缸里的玫瑰/ 2023年02月22日 08:23/ 0 赞/ 2 阅读

相关 Hive安装教程(避坑)

下载&解压第一步，[Hive官网][Hive]下载apache-hive-3.1.2-bin.tar.gz，其中3.1.2是我下载的版本，你要根据自己的hadoop版本

柔情只为你懂/ 2022年10月30日 13:29/ 0 赞/ 213 阅读

相关 Hive-2.1.1安装教程

[2019独角兽企业重金招聘Python工程师标准>>> ][2019_Python_] ![hot3.png][] Hive2安装详解 1. 解压hive安装包 Tar

爱被打了一巴掌/ 2022年10月02日 03:55/ 0 赞/ 129 阅读

相关 hive 安装

前提，需要安装hadoop 2.7 与 [Hadoop][] 类似，[Hive][] 也有 3 种运行模式： > 1. 内嵌模式 > > 将元数据保存在本地内嵌

Myth丶恋晨/ 2022年06月06日 05:05/ 0 赞/ 219 阅读

相关 hive 安装

hive 安装下载地址[apache-hive-x.y.z-bin.tar.gz][]。选择版本。本文中的`x.y.z`代表hive的某个版本例如`3.1.1` 1.

我不是女神ヾ/ 2022年04月25日 06:54/ 0 赞/ 266 阅读

相关 Hive 3.1.0 安装教程远程模式

首先需要搭建Hadoop集群与 MySQL服务器 Hive只要在一台Hadoop集群的服务器上安装即可 1.下载Hive Hive3.1下载地址: [http://

ゝ一世哀愁。/ 2021年11月06日 00:58/ 0 赞/ 399 阅读

相关 hive安装

hive安装 hive hadoop 安装配置 1. 安装文件上传文件apache-hive-2.3.3-bin.tar.gz到/opt/hadoop下解压

冷不防/ 2021年09月29日 20:08/ 0 赞/ 451 阅读

相关 Hive教程

<table> <tbody> <tr> <td><a href="http://www.codingdict.com/article/8149" title

我不是女神ヾ/ 2021年09月22日 19:10/ 0 赞/ 238 阅读

相关 Hive安装

1.依赖(需要提前安装hadoop) [https://blog.csdn.net/weixin\_43291055/article/details/106480902][h

川长思鸟来/ 2021年09月21日 08:12/ 0 赞/ 398 阅读