没有不值得去解决的问题,也没有不值得去学习的技术!

当后端接口响应超时时,有时响应 404、有时响应 504 的排查分析

当前端页面请求前端接口响应超时时,有时候响应 504(符合预期),有时候响应 404 (不符合预期)。

1、当前端页面请求前端接口响应超时时,有时候响应 504(符合预期),有时候响应 404 (不符合预期)。如图1

当前端页面请求前端接口响应超时时,有时候响应 504(符合预期),有时候响应 404 (不符合预期)。
图1
JSON

{
  "_request_time": "60.004",
  "_status": "404"
}

2、基于 _request_id:004c4f55c16c0904759fdb580d7c5df9 查询 ingress-nginx 的日志,ingress-nginx-controller 存在 一条记录(10-14 16:01:33),响应 404。如图2

基于 _request_id:004c4f55c16c0904759fdb580d7c5df9 查询 ingress-nginx 的日志,ingress-nginx-controller 存在 一条记录(10-14 16:01:33),响应 404。
图2

3、基于 _request_id:004c4f55c16c0904759fdb580d7c5df9 查询 Frontend Service 的日志,Frontend Service 存在 一条记录(10-14 16:01:33),请求 /50x.html ,响应 404,_upstream_status:504,表示 Backend Service 响应 504。如图3

基于 _request_id:004c4f55c16c0904759fdb580d7c5df9 查询 Frontend Service 的日志,Frontend Service 存在 一条记录(10-14 16:01:33),请求 /50x.html ,响应 404,_upstream_status:504,表示 Backend Service 响应 504。
图3

4、基于 _request_id:004c4f55c16c0904759fdb580d7c5df9 查询 Backend Service 的日志,Backend Service 存在 一条记录(10-14 16:01:33),响应为 504,由于 Frontend Service 主动断开连接,记录的实际响应 499。如图4

基于 _request_id:004c4f55c16c0904759fdb580d7c5df9 查询 Backend Service 的日志,Backend Service 存在 一条记录(10-14 16:01:33),响应为 504,由于 Frontend Service 主动断开连接,记录的实际响应 499。
图4

5、查看 Frontend Service 的 Nginx 配置。由于页面 50x.html 不存在,进而导致响应 404。最终决定注释掉相关的配置项。如图5

查看 Frontend Service 的 Nginx 配置。由于页面 50x.html 不存在,进而导致响应 404。最终决定注释掉相关的配置项。
图5
Nginx


    # redirect server error pages to the static page /50x.html
    #
    error_page   500 502 503 504  /50x.html;
    location = /50x.html {
        root   html;
    }


6、分析结论:如果前端服务(frontend-svc-80)正在等待 backend-svc-80 的响应,而 backend-svc-80 响应过慢,客户端会在响应 404 后主动关闭连接,导致 Backend Service Nginx 记录 499 状态码。

7、现在前端接口的请求的详细流程图:1. 客户端请求 → 2. Ingress Controller (ingress-nginx-controller) → 3. Frontend Service (frontend-svc-80) → 4. Backend Service (backend-svc-80) → 超时 (504|499) → 5. Frontend Service 返回 404 → 6. Ingress Controller 返回 404

8、通过 第 5 步骤的调整后,当后端接口响应超时时,不再响应 404 ,符合预期。如图6

通过 第 5 步骤的调整后,当后端接口响应超时时,不再响应 404 ,符合预期。
图6

关于作者 · 持续学习与技术实践

我是一名拥有 15 年以上开发经验的技术从业者,自 2013 年起持续运营个人技术博客,记录工作与个人项目中遇到的真实问题,以及解决问题过程中的探索、实践和思考。

除了技术写作,我也在持续开发和维护自己的独立项目,探索新技术和新工具在实际场景中的应用。我始终相信,没有不值得去解决的问题,也没有不值得去学习的技术。

如果这篇文章对你有所帮助,欢迎浏览博客中的其他文章,也欢迎交流技术经验与想法。

关于我  ·  GitHub  ·  邮件联系