4.1 KiB
【WMS-UTR项目】tsg_os_packet_io_rx_missed
| ID | Creation Date | Assignee | Status |
|---|---|---|---|
| OMPUB-1216 | 2024-04-07T17:17:22.000+0800 | 杨威 | 已解决 |
根据当地时间4月1日到4月5日的告警，发现多次出现tsg_os_packet_io_rx_missed的告警附件为1号到5号每天的告警统计信息caoshanfeng commented on 2024-04-12T09:35:12.454+0800:
在当地时间4月10日又出现了tsg_os_packet_io_rx_missed与tsg_os_packet_io_rx_drop的告警，告警内容见附件图片
caoshanfeng commented on 2024-04-12T10:08:31.583+0800:
在当地时间4月11日又出现了tsg_os_packet_io_rx_missed的告警，告警内容见附件图片 !4月11日告警.png|thumbnail!
yangwei commented on 2024-04-12T21:05:31.214+0800:
出现rx_missed时段，均存在firewall container restart，与https://jira.geedge.net/browse/OMPUB-1225原因相同
caoshanfeng commented on 2024-04-15T10:15:09.746+0800:
在当地时间4月12日又出现了tsg_os_packet_io_rx_missed的告警 !4月12日告警.png|thumbnail! [^4月12日监控.zip]
caoshanfeng commented on 2024-04-23T10:51:57.508+0800:
在当地时间4月22日又出现了tsg_os_packet_io_rx_missed的告警 告警信息与监控见附件 !4月22日告警信息.png|thumbnail! [^4月22日监控信息.zip]
caoshanfeng commented on 2024-04-24T11:31:46.139+0800:
在当地时间4月23日又出现了tsg_os_packet_io_rx_missed的告警 告警信息与监控见附件 !0423告警信息.png|thumbnail! [^0423监控信息.zip]
yangwei commented on 2024-04-24T16:02:56.522+0800:
初步排查原因见OMPUB-1225 相关评论
caoshanfeng commented on 2024-05-06T10:54:59.115+0800:
在当地时间4月30日-5月5日 期间又出现了tsg_os_packet_io_rx_missed的告警 告警信息与监控见附件 !4月30-5月5日告警信息.png|thumbnail! [^4月30日-5月5日告警信息.zip]
yangwei commented on 2024-05-06T15:00:28.049+0800:
对应rx_miss的时刻，均出现CPU使用突增，且新建会话数量突增的情况（下图所示为twa02的部分监控，从左至右，分别为整体的CPU占比，Rx Miss计数，sapp的CPU占用，新建和销毁会话数）
!image-2024-05-06-14-51-02-573.png|width=418,height=319!!image-2024-05-06-14-51-14-857.png|width=413,height=297!!image-2024-05-06-14-51-37-607.png|width=382,height=292!
!image-2024-05-06-14-54-56-166.png|width=794,height=235!
出现rx_missed的站点均为twa（01，02,03，05），丢包的时刻较为重叠（4.30 17:07， 5.1 23:12），同时伴随新建会话和CPU的突增，初步推测rx_miss的原因为该站点对应时刻出现突发流量，造成Traffic Engine瞬时丢包
caoshanfeng commented on 2024-05-09T11:14:07.247+0800:
在当地时间5月8日又出现了tsg_os_packet_io_rx_missed的告警 告警信息与监控见附件 !5月8日告警信息.png|thumbnail! [^5月8日监控信息.zip]
yangwei commented on 2024-09-26T10:22:27.325+0800:
WMS现场于2024年6月开始调整负载均衡策略，目前各站点TSGX接入的流量较为均匀，至9月未再出现流量突增的现象，暂时关闭本issue。
Attachments
56105/0423告警信息.png
56106/0423监控信息.zip
55023/4月10-11日监控信息.zip
54974/4月10日.png
54987/4月11日告警.png
55207/4月12日告警.png
55208/4月12日监控.zip
55020/4月1日到5日告警.png
55021/4月1日到5日监控信息.zip
55989/4月22日告警信息.png
55991/4月22日监控信息.zip
56636/4月30-5月5日告警信息.png
56637/4月30日-5月5日告警信息.zip
57018/5月8日告警信息.png
57021/5月8日监控信息.zip
56664/image-2024-05-06-14-48-18-389.png
56665/image-2024-05-06-14-49-35-730.png
56666/image-2024-05-06-14-51-02-573.png
56667/image-2024-05-06-14-51-14-857.png
56668/image-2024-05-06-14-51-37-607.png
56670/image-2024-05-06-14-54-56-166.png