文章预览
1、问题背景: 应用在配合R2m(R2M:京东内部一款基于Redis研发的,具备高性能、高可用、在线伸缩能力的分布式缓存服务)升级redis版本的过程中,上游反馈调用接口报错,RpcException:[Biz thread pool of provider has been exhausted ] ,通过监控系统和日志系统定位到现象只出现在一两个节点,并持续出现。第一时间通过JSF(JSF:中文名-杰夫,是Jingdong Service Framework (京东服务框架)的缩写,完全自主研发的高性能服务框架)将有问题的节点下线,保留现场,业务恢复。 报错日志如下: 24 -03-13 02 :21 :20.188 [JSF-SEV-WORKER-57-T-5] ERROR BaseServerHandler - handlerRequest error msg : [JSF-23003] Biz thread pool of provider has been exhausted , the server port is 22003 24 -03-13 02 :21 :20.658 [JSF-SEV-WORKER-57-T-5] WARN BusinessPool - [JSF-23002] Task :com.alibaba.ttl.TtlRunnable - com .jd .jsf
………………………………