hbase参数设置导致压测出现问题hbase ipc.RpcServer: (responseTooSlow)

缺乏、安全感 2021-10-23 09:21 472阅读 0赞

修改了hbase的配置文件参数 ：

hbase.hstore.blockingStoreFiles  之前设置为20W+，出现问题：

hbase.hstore.blockingStoreFiles 这个参数跟文件合并有关系，如果设置太大的话，目前集群出现的问题就是批量查询的时候，跑着跑着就出现查询一个要5-8s ，报错 ：hbase ipc.RpcServer: (responseTooSlow) 等等，应该是查询不到，可能是小文件太多，没有合并导致的，运行时间越长，出现的几率越多，再次将hbase.hstore.blockingStoreFiles设置为200

>   
>         <property>  
>                 <name>hbase.hregion.majorcompaction</name>  
>                 <value>0</value>  
>         </property>  
>         <property>  
>                 <name>hbase.hregion.max.filesize</name>  
>                 <value>536870912000</value>  
>         </property>  
>         <property>  
>                 <name>hbase.hstore.blockingStoreFiles</name>  
>                 <value>200</value>  
>         </property>  
>

hbase参数大全，详细看：

[https://www.cnblogs.com/nexiyi/p/hbase\_config\_94.html][https_www.cnblogs.com_nexiyi_p_hbase_config_94.html]

[https_www.cnblogs.com_nexiyi_p_hbase_config_94.html]: https://www.cnblogs.com/nexiyi/p/hbase_config_94.html

发表评论取消回复

表情：

评论列表（有 0 条评论，472人围观）

还没有评论，来说两句吧...

相关阅读

相关 jmeter压测(JMETER压测设置延迟)

如何使用jmeter进行压力测试在C\里是一个常量表达式，所以可以用在所有要求用编译时常量的地方，例如attribute的参数、方法参数的默认值、switch里的cas

た入场券/ 2023年09月26日 15:05/ 0 赞/ 123 阅读

相关 hbase热点问题

hbase热点问题 > 我们最开始hbase创建表默认是一个region，而我们所谓的热点问题其实就是对某一个region的过量访问造成的； > > >

小灰灰/ 2022年11月01日 13:48/ 0 赞/ 118 阅读

相关 HBase Indexer导致Solr与HBase数据不一致问题解决

1. 问题描述经过对HBase Indexer一段时间的使用、测试、观察，发现通过Phoenix端导入到HBase表的数据与Solr那边的数据会产生不一致的现象，具体体

太过爱你忘了你带给我的痛/ 2022年08月23日 00:45/ 0 赞/ 123 阅读

相关 hbase参数配置

1、hbase参数配置配置文件：hbase-site.xml和hbase.tmp.dir （1）本地文件系统tmp目录，一般配置成local模式的设置一下，但是最好还

刺骨的言语ヽ痛彻心扉/ 2022年07月16日 00:40/ 0 赞/ 234 阅读

相关 hbase参数配置优化

因[官方Book Performance Tuning][Book Performance Tuning]部分章节没有按配置项进行索引，不能达到快速查阅的效果。所以我以配置项驱

不念不忘少年蓝@/ 2022年06月15日 03:49/ 0 赞/ 149 阅读

相关 HBase 初学HBase的几个问题

什么是HBase 何时用HBase 和HivePig的区别 HBase的结构 1表

一时失言乱红尘/ 2022年06月04日 10:28/ 0 赞/ 114 阅读

相关 HBase meta元数据损坏导致hbase master初始化失败

故障起因：跑kylin任务，过程出错，异常信息：Direct buffer memory， java.io.IOException: java.lang.Ou

逃离我推掉我的手/ 2022年05月29日 10:48/ 0 赞/ 171 阅读

相关 Hbase参数调优

注: 前面两个是在hbase-env.sh文件中，其它的都是hbase-site.xml中 HBase Master Maximum Java heap size Hma

谁践踏了优雅/ 2022年04月25日 10:32/ 0 赞/ 232 阅读

相关 hbase参数设置导致压测出现问题hbase ipc.RpcServer: (responseTooSlow)

修改了hbase的配置文件参数： hbase.hstore.blockingStoreFiles 之前设置为20W+，出现问题： hbase.hstore.bl

缺乏、安全感/ 2021年10月23日 09:21/ 0 赞/ 473 阅读

相关关闭Hbase出现stoping hbase...........

博主是什么时候出现这个问题的呢，是在执行这条语句的时候：bin/stop-hbase.sh 出现这个问题的时候，是因为你的Hbase有问题，例如：什么东西没卸载干净，或者是把

﹏ヽ暗。殇╰゛Y/ 2021年10月15日 14:25/ 0 赞/ 334 阅读