近日平稳运行了将近4年的发号器突然出现问题,在元旦0分的时候出现短暂的性能下降,导致发号失败率飙高到一个不可接收的值,哎,意外总是发生在你想不到的地方. 这几天赶紧和小伙伴们赶紧追查原因,制定改造方案,下面记录一下分析和定位问题的过程,以便后期查阅,并不在同一个地方跌倒两次. 一.分析过程 1.现象 现象是业务所用的uuid服务的6052端口出现性能下降,导致成功率下降. 2.日志 出问题第一反应就是去看日志,我们HAProxy的日志级别是notice,具体的报错如下 Jan 1 00:00:…