既然已经知道是hive组件导致的MYSQL元数据库的问题,建议从以下方面着手:
1、从hive组件着手
a、检查是不是最近有新上的任务,没有经过代码审计或者SQL写的不规范的任务,占用资源过多,从而导致集群响应缓慢;
b、检查hiveserver2和hivemetastore的参数,分析其日志,看看是不是由于参数问题导致的集群组件缓慢;
2、从MYSQL数据库着手
a、检查MYSQL服务器的硬件资源情况,查看CPU、内存、IO、网卡等信息,看看是不是存在使用率过高的情况;
b、对hive的元数据库进行盘点分析,看看是不是有长连接或者占用资源很大的SQL语句运行,从而导致数据库缓慢;
3、从YARN组件着手
a)、查看租户队列资源的分配是否合理;
b)、检查是否存在有大量的状态不正常的任务。
针对大数据集群因集群HIVE组件缓慢导致元数据库MYSQL的异常问题,可以采取以下解决思路:
综上所述,针对大数据集群因集群HIVE组件缓慢导致元数据库MYSQL的异常问题,可以采取以上解决思路,具体选择哪种解决方案,需要根据具体情况进行评估和选择。