V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
chillingkitten
V2EX  ›  Java

大量 HTTP 请求调第三方慢接口引起的 fd 耗尽问题

  •  
  •   chillingkitten · 2020-08-13 23:58:23 +08:00 · 1753 次点击
    这是一个创建于 1569 天前的主题,其中的信息可能已经有所发展或是发生改变。
    由于历史原因和业务所限,我手头有个 web 项目对外提供接口,内部又是调第三方的服务。
    第三方的服务本来就比较慢,动不动就是超过 1s 才返回。 现在不定期会出事故:现象就是调这个服务的接口阻塞住,等到超时才关闭连接释放资源,这期间不断新的请求又进来,最终耗尽文件句柄数,服务器大量 CLOSE_WAIT,程序假死,进程还在,但是对外服务基本大量瘫痪。
    项目里面用的网络调用方法也就是 HttpClient 封装了下,加了点日志这些。当然最后也有关闭资源的代码。
    之前每次发生,只有重启服务,把这个工具类的超时时间设短一点,目前是 3s

    但这感觉治标不治本。三方接口本来就慢的话,正常返回都过 1s,大量请求进来感觉还是挡不住吧。 有什么好的方法么? 只能横向扩展加机器么?
    目前尚无回复
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2889 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 26ms · UTC 03:43 · PVG 11:43 · LAX 19:43 · JFK 22:43
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.