greenplum安装方法详解

男娘i 2022-08-02 11:50 485阅读 0赞

一、环境准备  
1、安装VMware软件，然后在VMware里安装三台Linux虚拟机(我使用的是redhat)  
2、设置虚拟机

3、下载数据库安装文件greenplum-db-4.2.2.4-build-1-CE-RHEL5-i386  
  
二、安装  
注：标示“三台主机”的表示要在三台电脑上都做该操作，“master节点”表示只在mdw主机上操作  
1、关闭防火墙(三台主机)(学习时可以直接关闭，正式环境是通过开放端口)  
service iptables stop  停止防火墙服务，重启电脑后仍然会开启  
chkconfig iptables off  关闭防火墙服务开机启动，重启后生效  
可以两个命令结合使用避免重启  
  
2、修改hosts文件(三台主机)  
在hosts文件中添加或修改一下内容  
192.168.10.200 mdw  
192.168.10.201 sdw1  
192.168.10.202 sdw2  
  
添加之后，可以通过ping命令测试是否正确，如：ping sdw1 测试是否能访问sdw1节点  
  
3、修改或添加/etc/sysctl.conf(三台主机)  
xfs\_mount\_options = rw,noatime,inode64,allocsize=16m

kernel.shmmax = 500000000

kernel.shmmni = 4096

kernel.shmall = 4000000000

kernel.sem = 250 512000 100 2048

kernel.sysrq = 1

kernel.core\_uses\_pid = 1

kernel.msgmnb = 65536

kernel.msgmax = 65536

kernel.msgmni = 2048

net.ipv4.tcp\_syncookies = 1

net.ipv4.ip\_forward = 0

net.ipv4.conf.default.accept\_source\_route = 0

net.ipv4.tcp\_tw\_recycle = 1

net.ipv4.tcp\_max\_syn\_backlog = 4096

net.ipv4.conf.all.arp\_filter = 1

net.ipv4.ip\_local\_port\_range = 1025 65535

net.core.netdev\_max\_backlog = 10000  
vm.overcommit\_memory = 2

4、配置/etc/security/limits.conf文件，添加以下内容(三台主机)  
\* soft nofile 65536  
\* hard nofile 65536  
\* soft nproc 131072  
\* hard nproc 131072  
  
5、设置预读块的值为16384(三台主机)  
\# /sbin/blockdev  \--getra  /dev/sda 查看预读块，默认大小为256  
\# /sbin/blockdev  \--setra   16384  /dev/sda  设置预读块  
  
6、设置磁盘访问I/O调度策略(三台主机)  
\#echo deadline > /sys/block/sda/queue/scheduler  
  
7、上传并解压数据库安装文件(master节点)

\# unzip greenplum-db-4.2.2.4-build-1-CE-RHEL5-i386.zip

8、安装软件(master节点)

\# /bin/bash greenplum-db-4.2.2.4-build-1-CE-RHEL5-i386.bin

安装过程中会显示以下内容，直接使用默认即可

![20150718203130178][]

安装之后的目录文件如下：

![20150718203153374][]

9、获取环境参数(master节点)  
\# source /usr/local/greenplum-db/greenplum\_path.sh  
  
10、创建包含所有主机名的文件all\_hosts，文件内容：(三台主机)  
  mdw  
  sdw1  
  sdw2  
  
11、运行gpseginstall工具 (master节点)  
\# gpseginstall -f all\_hosts -u gpadmin -p gpadmin  
all\_hosts是上个步骤创建的文件，安装过程中会让输入三台主机的密码，完成后提示成功，如下图：

![20150718203248566][]

12、切换到gpadmin用户验证无密码登录(三台主机)  
        (1)切换用户  
            $ su - gpadmin  
        (2)使用gpssh工具来测试无密码登录所有主机，结果如下图：  
            $ gpssh -f all\_hosts -e ls -l $GPHOME

![20150718203320545][]

13、配置环境变量(master节点)

将". /usr/local/greenplum-db-4.2.2.4/greenplum\_path.sh"添加到.bashrc文件最后，然后将.bashrc文件发送到sdw1和sdw2,命令如下：

scp .bashrc sdw1:~

scp .bashrc sdw2:~

14、创建存储区域(master节点)

(1) 创建Master数据存储区域

\# mkdir -p /data/master

(2) 改变目录的所有权

\# chown gpadmin:gpadmin /data/master

(3) 创建一个包含所有segment主机名的文件seg\_hosts，内容如下：

sdw1

sdw2

(4) 使用gpssh工具在所有segment主机上创建主数据和镜像数据目录，如果没有设置镜像可以不创建mirror目录

\# gpssh -f seg\_hosts -e 'mkdir -p /data/primary'

\# gpssh -f seg\_hosts -e 'mkdir -p /data/mirror'

\# gpssh -f seg\_hosts -e 'chown gpadmin /data/primary'

\# gpssh -f seg\_hosts -e 'chown gpadmin /data/mirror

15、同步系统时间

(1) 在Master主机上编辑/etc/ntp.conf来设置如下内容：  
  server 127.127.1.0  
     (2) 在Segment主机上编辑/etc/ntp.conf  
  server mdw  
     (3) 在Master主机上，通过NTP守护进程同步系统时钟  
  \# gpssh -f all\_hosts -v -e 'ntpd'

16、验证操作系统设置  
\# gpcheck -f all\_hosts -m mdw  
注意运行结果是否有error信息，如果有处理掉错误信息后重新执行上面的命令检查，直至没有error信息，error如下图

![20150718203435564][]

成功的信息如下：

![20150718203447577][]

17、创建Greenplum数据库配置文件  
(1) 以gpadmin用户登录  
  \# su - gpadmin  
(2) 从模板中拷贝一份gpinitsystem\_config文件  
  $ cp $GPHOME/docs/cli\_help/gpconfigs/gpinitsystem\_config   /home/gpadmin/gpinitsystem\_config  
  $ chmod 775 gpinitsystem\_config  
(3) 设置所有必须的参数  
  ARRAY\_NAME="EMC Greenplum DW"  
  SEG\_PREFIX=gpseg  
  PORT\_BASE=40000  
  declare -a DATA\_DIRECTORY=(/data/primary)  
  MASTER\_HOSTNAME=mdw  
  MASTER\_DIRECTORY=/data/master  
  MASTER\_PORT=5432  
  TRUSTED SHELL=ssh  
  CHECK\_POINT\_SEGMENT=8  
  ENCODING=UNICODE  
(4) 设置可选参数  
  MIRROR\_PORT\_BASE=50000  
  REPLICATION\_PORT\_BASE=41000  
  MIRROR\_REPLICATION\_PORT\_BASE=51000  
  declare -a MIRROR\_DATA\_DIRECTORY=(/data/mirror)  
  
18、运行初始化工具初始化数据库  
$ gpinitsystem -c gpinitsystem\_config -h seg\_hosts  
成功之后，数据库便启动了，信息如下：

![20150718203559015][]

19、设置环境变量  
添加“export MASTER\_DATA\_DIRECTORY=/data/master/gpseg-1”到~/.bashrc文件尾，并同步到sdw1和sdw2节点  
  $ scp .bashrc sdw1:~  
  $ scp .bashrc sdw2:~  
  
20、启动和停止数据库测试是否能正常启动和关闭，命令如下  
  $ gpstart  
  $ gpstop  
  
21、访问数据库  
psql -d postgres  
输入查询语句  
select datname,datdba,encoding,datacl from pg\_database;  
  
显示信息如下

![20150718203640415][]

[20150718203130178]: /images/20220731/e8d50f2737e8425d88e703dd06872991.png
[20150718203153374]: /images/20220731/0633a797112b468c9f3fc437db35452a.png
[20150718203248566]: /images/20220731/a7f18dd1b99041b4ac0c84803a3d1e0b.png
[20150718203320545]: /images/20220731/2c0bffa7e74c45eba2a1d591efe51582.png
[20150718203435564]: /images/20220731/a97a701637c64ee5b4714ae1499ae4ce.png
[20150718203447577]: /images/20220731/efaa8cedf4f6462ab763b014808b324c.png
[20150718203559015]: /images/20220731/77d58ee8c2584b59893f9594388b8a06.png
[20150718203640415]: /images/20220731/e8ff4535c3e44d32b9e2c31ff8af0275.png