【M22项目】YGN-MYTEL站点OLAP HBase出现告警

ID	Creation Date	Assignee	Status
OMPUB-1483	2024-09-26T12:48:44.000+0800	王成成	处理中

经巡检：

YGN-MYTEL站点出现OLAP HBase has too many regions in transition和OLAP HBase too many unhealthy Region告警

!image-2024-09-26-11-17-00-795.png|width=974,height=46!

!image-2024-09-26-11-18-09-860.png|width=961,height=58!wangchengcheng commented on 2024-09-26T16:55:06.535+0800:

问题原因：由于 OMPUB-1479 问题，YGN-MYTEL 站点的非结构化日志成倍增加，导致 HBase 内存不足，从而引发内存溢出并导致重启。解决方案：减少YGN-MYTEL站点 HBase 写缓存的大小。登录Hbase集群第一台做如下操作：

将 /opt/tsg/olap/hbase/conf/hbase-site.xml 文件中的 hbase.hregion.memstore.flush.size 参数值修改为 268435456。
将/opt/tsg/olap/hbase/conf/hbase-site.xml分发至其他Hbase节点。
在每台服务器上执行：“docker restart HRegionServer”。

chengsiyuan commented on 2024-09-26T17:08:01.409+0800:

已按照上述步骤进行调整

Attachments

63338/image-2024-09-26-11-17-00-795.png

63337/image-2024-09-26-11-18-09-860.png

63345/企业微信截图_17273375606612.png

63346/企业微信截图_17273377915324.png