如何发现定位大数据集群中因集群HIVE组件缓慢导致元数据库MYSQL的异常问题?

如何发现定位大数据集群中因集群HIVE组件缓慢导致元数据库MYSQL的异常问题?显示全部

如何发现定位大数据集群中因集群HIVE组件缓慢导致元数据库MYSQL的异常问题?

收起
参与5

返回曹某某的回答

曹某某曹某某数据库工程师中电长城

HIVE的问题分两类:
1、hivemetastore
通过集群的监控页面或者hivemetastore的日志分析查看hivemetastore的并发数量等参数的限制问题
2、hiveserver2
1)、咨询查看是不是最近有新增加的任务,通过分析看看不是有异常的SQL语句等程序;
2)、通过集群的监控页面或者hiveserver2的日志分析,查看是不是存在参数的问题;
3)、审计分析hive的表,是不是存在大量的分区表或者大的全表扫描的表等需要重点关注的审计表等信息。

软件开发 · 2023-06-12
浏览486

回答者

曹某某
数据库工程师中电长城

曹某某 最近回答过的问题

回答状态

  • 发布时间:2023-06-12
  • 关注会员:2 人
  • 回答浏览:486
  • X社区推广