hbase启动后HMaster迅速挂掉的问题（遇到问题学会看日志，发那些表面的报错纯属耽误时间）

爱被打了一巴掌 2022-04-08 09:22 634阅读 0赞

首先打开hbase/logs目录下的xxxx.xxxx. master.log的日志

拉到最后是最新一次的报错。

如下异常

java.lang.IllegalStateException: The procedure WAL relies on the ability to hsync for proper operation during component failures, but the underlying filesystem does not support doing so. Please check the config value of 'hbase.procedure.store.wal.use.hsync' to set the desired level of robustness and ensure the config value of 'hbase.wal.dir' points to a FileSystem mount that can provide it.

hbase-site.xml增加配置

<property>  
<name>hbase.unsafe.stream.capability.enforce</name>  
<value>false</value>  
</property>

添加之后hbase的Hmaster不再挂了

...

曹，还是挂了。。。

日志里有新的报错

018-12-07 16:32:32,089 ERROR \[RpcServer.default.FPBQ.Fifo.handler=29,queue=2,port=16000\] master.MasterRpcServices: FSWALProvider.java:138)  
at org.apache.hadoop.hbase.wal.AbstractFSWALProvider.getWAL(AbstractFSWALProvider.java:57)  
at org.apache.hadoop.hbase.wal.WALFactory.getWAL(WALFactory.java:276)  
at org.apache.hadoop.hbase.regionserver.HRegionServer.getWAL(HRegionServer.java:2064)  
at org.apache.hadoop.hbase.regionserver.HRegionServer.buildServerLoad(HRegionServer.java:1290)

然后看了这个人的文章，发现应该还是版本不匹配造成的。HBase 2.0.2只支持到hadoop 2.7，我这都3.0了。

————————————————————————

# CDH 与 HBase2 整合出错 #

CDH 版本： 5.14.2 ， 其hadoop 版本类似　｀hadoop-common-2.6.0-cdh5.14.2.jar｀  
在standalone模式 和 伪分布式下没有异常。

当部署完全分布式时 ， 3个HRegionServer ，2个HMaster ， ZK使用非HBase自带版本时，HRegionServer启动后自动退出，日志报错如下：

2018-05-24 14:38:49,921 ERROR [RpcServer.default.FPBQ.Fifo.handler=29,queue=2,port=16000] master.MasterRpcServices: t org.apache.hadoop.hbase.wal.AbstractFSWALProvider.getWAL(AbstractFSWALProvider.java:138)
            at org.apache.hadoop.hbase.wal.AbstractFSWALProvider.getWAL(AbstractFSWALProvider.java:57)
            at org.apache.hadoop.hbase.wal.WALFactory.getWAL(WALFactory.java:252)
            at org.apache.hadoop.hbase.regionserver.HRegionServer.getWAL(HRegionServer.java:2065)
            at org.apache.hadoop.hbase.regionserver.HRegionServer.buildServerLoad(HRegionServer.java:1291)
            at org.apache.hadoop.hbase.regionserver.HRegionServer.tryRegionServerReport(HRegionServer.java:1172)
            at org.apache.hadoop.hbase.regionserver.HRegionServer.run(HRegionServer.java:989)
            at java.lang.Thread.run(Thread.java:748)
    Caused by: java.lang.ClassNotFoundException: org.apache.hadoop.fs.StorageType
            at java.net.URLClassLoader.findClass(URLClassLoader.java:381)
            at java.lang.ClassLoader.loadClass(ClassLoader.java:424)
            at sun.misc.Launcher$AppClassLoader.loadClass(Launcher.java:349)
            at java.lang.ClassLoader.loadClass(ClassLoader.java:357)
            ... 19 more

`java.lang.ClassNotFoundException: org.apache.hadoop.fs.StorageType` 类找不到， 相应的hadoop jar包中没有该类。

官网下载的HBase2.0.0 版本， 其编译的hadoop 版本为2.7.3 ，应该是版本不匹配。

后使用HBase1.2.6版本， 完全分布式集群下正常启动，暂不异常。