当leetcode真题上了生产引发的线上问题

文章预览

阿里妹导读 记录并分析一次线上支付系统出现OOM（Out Of Memory）故障的排查与解决过程。 一、问题发现 11.7上午10点半时，正值业务高峰期。预警群里突然报警，支付网关的下游HSF请求出现失败，下游额度中心一台机子出现异常。于是第一时间通知下游同学紧急隔离问题机器，保证请求正常处理不再报警后，下游同学排查问题。     二、问题排查 下游同学通过grace分析问题机器dump文件时，根据泄漏报表显示的崩溃线程及代码找到我，让我看一下这个问题，我才知道原来刚刚下游的机子异常是因为这段代码，这段代码已经运行三个月了，怎么今天出问题了呢？   带着疑问，先到线程信息查看崩溃线程的执行情况，发现程序在不断递归，递归的过程在不断创建链表占用内存，最后OOM了。   这段代码是今年8.8上线的，跟下游同学咨询得知 ………………………………