当后端接口响应超时时,有时响应 404、有时响应 504 的排查分析
1、当前端页面请求前端接口响应超时时,有时候响应 504(符合预期),有时候响应 404 (不符合预期)。如图1
{ "_request_time": "60.004", "_status": "404" }
2、基于 _request_id:004c4f55c16c0904759fdb580d7c5df9 查询 ingress-nginx 的日志,ingress-nginx-controller 存在 一条记录(10-14 16:01:33),响应 404。如图2
3、基于 _request_id:004c4f55c16c0904759fdb580d7c5df9 查询 Frontend Service 的日志,Frontend Service 存在 一条记录(10-14 16:01:33),请求 /50x.html ,响应 404,_upstream_status:504,表示 Backend Service 响应 504。如图3
4、基于 _request_id:004c4f55c16c0904759fdb580d7c5df9 查询 Backend Service 的日志,Backend Service 存在 一条记录(10-14 16:01:33),响应为 504,由于 Frontend Service 主动断开连接,记录的实际响应 499。如图4
5、查看 Frontend Service 的 Nginx 配置。由于页面 50x.html 不存在,进而导致响应 404。最终决定注释掉相关的配置项。如图5
# redirect server error pages to the static page /50x.html # error_page 500 502 503 504 /50x.html; location = /50x.html { root html; }
6、分析结论:如果前端服务(frontend-svc-80)正在等待 backend-svc-80 的响应,而 backend-svc-80 响应过慢,客户端会在响应 404 后主动关闭连接,导致 Backend Service Nginx 记录 499 状态码。
7、现在前端接口的请求的详细流程图:1. 客户端请求 → 2. Ingress Controller (ingress-nginx-controller) → 3. Frontend Service (frontend-svc-80) → 4. Backend Service (backend-svc-80) → 超时 (504|499) → 5. Frontend Service 返回 404 → 6. Ingress Controller 返回 404
8、通过 第 5 步骤的调整后,当后端接口响应超时时,不再响应 404 ,符合预期。如图6
近期评论