MysqlIO.readFully问题排查分析过程

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了MysqlIO.readFully问题排查分析过程相关的知识,希望对你有一定的参考价值。

问题描述

支付清结算系统"外部对账"部分任务在早上6:00~7:00时间段内对账速度缓慢,且经常造成对账统计结果不准确问题,导致结转记账不准确。

初步分析及处理过程

由于外部对账是经过性能优化的,且在压测环境表现良好,所以最开始初步认为是由于数据库性能瓶颈导致,初步处理方式为将线上6:00~7:00之前的慢SQL进行了一番排查,并对涉及外部系统的慢SQL进行了优化,这个步骤理论上是可以解决此类问题,但RDS(阿里云mysql可能存在慢SQL统计不准确问题)。

特点时间段内线程栈分析

特定时间段线程栈分析,由于SQL优化部分并没有解决此类问题,为了查看在早上6:00~7:00这个时间段内程序JVM内部到底发生了什么,所以采取了定时抓取线程栈日志的手段(具体方式为在Linux服务器添加cron任务,并累计输出日志的方式,脚本如

以上是关于MysqlIO.readFully问题排查分析过程的主要内容,如果未能解决你的问题,请参考以下文章

压测过程中故障排查之一:高CPU占用问题分析案例

MySQL一次死锁排查过程分析(双update)

记一次接口慢查排查

一个杀不死的小强,kill进程无效的原因 记录故障排查过程中kill进程无效的分析过程

记一次 Flink 反压问题排查过程

一起C语言中程序时序问题的排查过程