故障处理之数据库节点实例异常重启丨本际云推荐

故障处理之数据库节点实例异常重启

大家好，我是本站的小编小本本。最近遇到了一起数据库节点实例异常重启的故障，现在我来跟大家分享一下这个故障的处理过程。

故障处理之数据库节点实例异常重启

故障现象和分析过程

下面是我们对故障现象和分析过程的总结：

故障现象：数据库节点3因大量高并发insert语句导致sql积压，从而短时间内消耗大量主机资源，对数据库性能产生了很大影响，严重影响数据库的正常运行，导致节点3数据库发生重启。

分析过程如下：

20点28分左右，收到节点3大量sql积压短信告警,积压SQL主要为：9yy1zhgjvfbpj。节点3:
登陆环境核查数据库实例状态及实例启动时间，20点36分确认数据库实例状态正常，且实例没有重启。当即对异常等待事件的sql进行查杀，但是由于应用还在不停的发起连接，在20点45分时节点3发生重启。
查看主机日志，并确认无异常报错信息。节点3主机日志：
通过检查数据库运行状况时发现节点3上有大量sql积压的等待事件。
通过核查节点3上sql积压等待事件对应的会话信息，定位到积压sql对应的sql_id，查到其sql文本就是一个insert语句。
故障时间段节点3redo变化分析。故障时间段每秒产生的redo量相比正常时间段增长了约180%。
查看会话变化情况发现从20点15分开始数据库会话开始突增。
通过分析故障时间段哪些SQL占用了资源，发现其中sql_id为9yy1zhgjvfbpj的语句占用了数据库48.24%的DBTIME。并最终于20:45分CPU资源耗尽导致实例重启。