网站首页 > 技术教程 正文
测试环境 membership 模块超时60s 问题定位步骤如下:
step1: 前端 debug 时查看到了504的响应-----(发现问题)
问题分析
nginx访问出现504 Gateway Time-out,一般是由于程序执行时间过长导致响应超时,例如程序需要执行60秒,而nginx最大响应等待时间为30秒,这样就会出现超时。
step2:查看nginx log
==> access.log <==
10.7.0.13 - - [15/May/2020:16:42:19 +0800] 10.7.00.13:9301 60.001 60.001 ars-beta.test_webcn-la.com POST /api/gc/membership/tier/getMembershipTierByTest
HTTP/1.1 "504" 705 "-" "-" "Apache-HttpClient/4.5.3 (Java/1.8.0_144)"
可以看到nginx也是504的状态,于是可以查看后端对应的服务是10.7.00.13:9301
可以使用curl 来验证一下服务是否正常:curl -I http://localhost:9301/test.html
step3:查看9301端口状态:
wc -l 查看后大概有117个左右的连接,平时只有以下这样的情况
step4:结合业务查看membership.controller 的access.log(本日志记录了所有与本服务交互的请求处理), 查看调用请求的整个过程。
有两个惊人发现:第一个是红框里面的ip, 第二个是红框里面的当前请求线程名称
step5: 第一个红框的ip 居然是我自己的ip, 这下子问题定位了,因为我本地有在请求membership 服务,并且是python开发的监控服务是否正常的应用所发出的请求。
step6: 结论为:因为我本机在每五分钟(从上面的请求日志间隔可以窥探到)请求一次membership 服务的接口,用于保障beta环境的可用性验证,最终因为请求的membership 服务连接一直不能释放导致了membership 服务僵死掉。
查看9301端口状态时,存在这两个状态,说明如下:
step7: 解决方案
重新重启了服务就恢复了,不过还发现了mq 地址变更但代码配置里面未变更的问题并让开发修复,算是意外的收获。
猜你喜欢
- 2024-10-15 504 Gateway Time-out(504 gateway time-out解决流程手机)
- 2024-10-15 网站报错504怎么办?(网站报503错误)
- 2024-10-15 业务前端界面报错504排查思路和解决办法
- 2024-10-06 蓝易云 - Linux系统Nginx优化与防盗链详细教程
- 2024-10-06 提示“504连接源站超时”是怎么回事
- 2024-10-06 错误代码解析500、501、502、503、504
- 2024-10-06 少年郎,我这里有一份nginx配置,你拿走吧
- 2024-10-06 K8S灰度环境频繁出现502(k8s基于jenkins的灰度发布)
- 2024-10-06 网络抓包定位504 gateway timeout问题
你 发表评论:
欢迎- 最近发表
- 标签列表
-
- 下划线是什么 (87)
- 精美网站 (58)
- qq登录界面 (90)
- nginx 命令 (82)
- nginx .http (73)
- nginx lua (70)
- nginx 重定向 (68)
- Nginx超时 (65)
- nginx 监控 (57)
- odbc (59)
- rar密码破解工具 (62)
- annotation (71)
- 红黑树 (57)
- 智力题 (62)
- php空间申请 (61)
- 按键精灵 注册码 (69)
- 软件测试报告 (59)
- ntcreatefile (64)
- 闪动文字 (56)
- guid (66)
- abap (63)
- mpeg 2 (65)
- column (63)
- dreamweaver教程 (57)
- excel行列转换 (56)
本文暂时没有评论,来添加一个吧(●'◡'●)