impala2.12.0的编译与安装

我就是我 2021-11-11 12:02 456阅读 0赞

最近因为工作需要需要编译impala，去官网找编译步骤，我去！就一句话：

![在这里插入图片描述][20190805201654210.png]  
然后在网上找教程，好家伙，找了一大堆文章，没有一个能然我顺利编译成功的。  
做人果然还是要靠自己啊，我就从bin/bootstrap\_build.sh这个编译脚本开始。历经各种坑，总算是编译部署成功。下面我将贡献出我的编译与安装步骤，希望能帮助大家少走弯路。

# 环境 #

操作系统：centos7.5

# impala版本 #

impala-2.12.0-cdh5.16.1

# 资源下载 #

## impala源码下载 ##

https://codeload.github.com/cloudera/Impala/zip/cdh5-2.12.0\_5.16.1

# yum 安装依赖 #

yum -y install git ant libevent-devel automake libtool flex bison gcc-c++ openssl-devel make cmake  
yum -y install doxygen.x86\_64 glib-devel python-devel bzip2-devel svn libevent-devel krb5-workstation  
yum -y install openldap-devel db4-devel python-setuptools python-pip cyrus-sasl\* postgresql postgresql-server ant-nodeps lzo-devel lzop

# 编译 #

./buildall.sh -notests -so

# 部署 #

**需要注意的是，在部署impala之前，需要保证hadoop和hive已经部署并且正确配置，因为impala需要依赖于hive的元数据，而hive依赖于hadoop。**

## 修改start脚本 ##

### 修改start-statestored.sh ###

vim /impala/impala-2.12.0-cdh5.16.1/bin/start-statestored.sh  
在第一行添加：

source /impala/impala-2.12.0-cdh5.16.1/bin/impala-config.sh

修改STATESTORED\_ARGS="-state\_store\_port=24000"

修改后如下图所示：  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxcXEwMTk5MTgx_size_16_color_FFFFFF_t_70]

### 修改start-catalogd.sh ###

vim /impala/impala-2.12.0-cdh5.16.1/bin/start-catalogd.sh  
在第一行添加：

source /impala/impala-2.12.0-cdh5.16.1/bin/impala-config.sh

修改后如下图所示：  
![在这里插入图片描述][20190806192543206.png]

### 修改start-impalad.sh ###

vim /impala/impala-2.12.0-cdh5.16.1/bin/start-impalad.sh  
在第一行添加：

source /impala/impala-2.12.0-cdh5.16.1/bin/impala-config.sh

修改IMPALAD\_ARGS="  
\-catalog\_service\_host=填写主机名  
\-state\_store\_port=24000  
\-use\_statestore  
\-state\_store\_host=填写主机名  
\-be\_port=22000  
\-state\_store\_subscriber\_port=26100  
\-mem\_limit=100g "

修改后如下图所示：  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxcXEwMTk5MTgx_size_16_color_FFFFFF_t_70 1]

### 修改set-classpath.sh ###

vim /impala/impala-2.12.0-cdh5.16.1/bin/start-impalad.sh  
在CLASSPATH中添加一个路径，该路径下需要有hadoop的core-site.xml hdfs-site.xml hive-site.xml

修改如下：  
![在这里插入图片描述][20190807095420817.png]

### 修改impala-shell.sh ###

vim /impala/impala-2.12.0-cdh5.16.1/bin/impala-shell.sh  
在第一行添加：

source /impala/impala-2.12.0-cdh5.16.1/bin/impala-config.sh

## 启动impala ##

按顺序启动impala的3个组件statestored,catalogd,impalad

nohup ./start-statestored.sh &
    
    nohup ./start-catalogd.sh &
    
    nohup ./start-catalogd.sh &

# 验证 #

如果部署成功，25000 ，25010,25020三个端口都可以访问

并且运行 ./impala-shell.sh 可以进入impala的shell模式

如果安装部署遇到问题可留言联系我~~

[20190805201654210.png]: /images/20211109/e5f51f8a0d044151a9f5b83b8515913d.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxcXEwMTk5MTgx_size_16_color_FFFFFF_t_70]: /images/20211109/c4ab8df7fe9746f087fe073aeca41517.png
[20190806192543206.png]: /images/20211109/7dbbc47e8a42408c82748b2861c3535a.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxcXEwMTk5MTgx_size_16_color_FFFFFF_t_70 1]: /images/20211109/73b769b3fe264c9db546cb8ff0dc20f6.png
[20190807095420817.png]: /images/20211109/ef6a42be67ec4849b68be16104c1df52.png