详解：Hive的MetaStore和三种配置方式

快来打我* 2024-02-19 20:09 72阅读 0赞

## 一：Metadata概念： ##

元数据包含用Hive创建的database、table等的元信息。元数据存储在关系型数据库中。如Derby、MySQL等。

## 二：Metastore作用： ##

客户端连接metastore服务，metastore再去连接MySQL数据库来存取元数据。有了metastore服务，就可以有多个客户端同时连接，而且这些客户端不需要知道MySQL数据库的用户名和密码，只需要连接metastore 服务即可。  
应用有像spark这样需要用到hive元数据的框架存在!所以就要给它们开放服务  
**metaStore server 作用:**  
bin/hin --访问–> metaStore server --访问–>MySQL  
beeline --访问–>hiveServer2 --访问–> metaStore server --访问–> MySQL

## 三：Metastore 有3中开启方式: ##

### –1-->默认开启方式: ###

没有配置metaStore的时候,每当开启bin/hive;或者开启hiveServer2的时候,都会在内部启动一个metastore  
嵌入式服务;资源比较浪费,如果开启多个窗口,就会存在多个metastore server。（）

默认情况下，metastore服务和Hive的服务运行在同一个JVM中，包含了一个内嵌的以本地磁盘作为存储的Derby（Hive自带的数据库）数据库实例。同时，这种配置也被称为内嵌配置。但是这种方式的不好之处就在于每次只有一个内嵌的Derby数据库可以访问某个磁盘上的数据文件，也就是说一次只能为每个metastore打开一个hive会话。如果尝试连接多个，会报错。这样效率很低。

### –2-->local mataStore(本地) ###

当metaStore和装载元数据的数据库(MySQL)存在同一机器上时配置是此模式,  
开启metastore服务就只需要开启一次就好,避免资源浪费!

如果要支持多会话，或者多用户的话，需要使用一个独立的数据库（比如mysql,比较常用），这种配置方式称为本地metastore配置。虽然这种方式Hvie服务和Metastore服务仍然在一个JVM进程中，但连接的却是另外一个进程中运行的数据库，在同一台机器上或者远程机器上。任何JDBC兼容的数据库都可以通过javax.jdo.option.\*配置属性来供metastore使用。

### –3-->Remote Metastore(远程) ###

当metaStore和装载元数据的数据库(MySQL)不存在同一机器上时配置是此模式,  
开启metastore服务就只需要开启一次就好,避免资源浪费!  
还有一种配置时远程metastore配置，这种配置情况下，一个或多个metastore服务器和Hive服务运行在不同的进程中。这样一来，数据库层可以 完全置于防火墙后，客户端则不需要数据库凭证（密码账号），从而提供了更好的可管理性和安全。可以通过hive.metastore.uris设置 为metastore服务器你URI（如果有多个服务器，可以用’逗号’分割），把hive服务设为使用远程metastore.metastore服务器的URI的格式为：thrift://host:port.