微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

测试环境hbase集群异常

集群共三台主机,两个数据节点,hbase共有两个regionserver

1)存在的问题 8月6日晚九点半,测试集群两个regionserver同时异常,hbase除了list以外的操作都不能执行,观察master和regionserver的日志,都出现了如下报错:

(2)分析过程 从日志中暂时未分析出具体原因,决定先重启,重启后,hbase恢复正常,hbck状态一致。 过了大概一个小时,hbase又挂了1个regionserver,hbase又无法操作,日志内容报错还是一样的。 怀疑是zookeeper或者hdfs有问题,均排查无误,整个集群全部重启,hbase还是正常了一个小时后就异常,随后查看监控页面,发现hbase的region数达到一万二,每个regionserver承担6000个region,怀疑是region数过多导致hbase异常。 (3)解决办法 对数据进行清理,重启hbase后,恢复正常

  (4)原因总结   由于业务测试时直接拿生产的建表语句建表,生产建表语句均做了region预划分,每张表有很多region,而实际上数据量却很小,将业务不用的表、过期的表全部清理,将region总数降到1000后,重启hbase,恢复正常

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 [email protected] 举报,一经查实,本站将立刻删除。

相关推荐