redis分布式锁超时事故

redis分布式锁有两层超时:

1 锁等待超时

2 tcp connection超时

任一个超时未设置,都有可能造成阻塞

事故如下:

 *disruptor采用阻塞模式,到最大消息池时即阻塞,导致线程阻塞

左下角,获取redis锁虽然使用了trylock立即返回,但是没想到,由于断网,redis客户端在tcp层阻塞了,且未设置超时,阻塞随着阻塞链传递到无界的single线程池,最终导致oom

解决方案:

1 redis部署内网,并在tcp redis锁2个层面设置超时

2 线程池设置为有界,且配置放弃策略,这个方案虽然保障了jvm,但会有业务上的遗漏,比如行情到了,应该成交了,确被放弃了

原文地址:https://www.cnblogs.com/silyvin/p/10076003.html