【实战复盘】WMS升级后高并发场景下PDA网络波动引发AGV调度死锁排查
本篇文章记录了一次零食仓WMS系统升级至V2.6后,在高峰期发生的“现场已完成拣货但集货位AGV调度看板卡滞、车队死锁”故障排查全过程。文章从PDA端日志分析、WMS后台数据库状态表比对、状态机断点定位到临时恢复与SOP沉淀进行深入拆解,为自动化仓储项目人机协同类排障提供实战参考。外部物流实施公司原创,本人还在持续轮岗学习中。
0. 前言与项目背景
在自动化仓储(WMS/WCS/RCS)项目实施过程中,移动机器人(AGV/AMR)的调度效率往往不单取决于路径规划算法,更与物理现场的操作员手持终端(PDA)以及上层业务系统的状态协同紧密相关。
本文记录了一次现场 WMS 升级后,高并发作业场景下发生的 AGV 车队异常卡死与调度死锁故障。通过对 PDA 操作日志、WMS 数据库状态表以及状态机流转逻辑的深度追踪,成功找出了故障根因并完成了复盘沉淀。
1. 现场故障现象描述
- 现场情况:仓库作业高峰期,AGV 已将包含货架的容器平移送达指定集货位,仓库工人使用 PDA 扫码扣减并完成了物理拣货作业。
- 异常表现:物理作业已结束,但 RCS 调度看板及 WMS 后台看板上的单据状态异常停留在**“拣货中 100%”**。AGV 无法接收到上位机下发的“空货架返航”或“搬运下一波次”的离场指令,导致后续多台 AGV 在主干道死锁堵塞。
2. 诊断与排查过程
在解决此类硬件与业务系统交接断点的问题时,排查遵循“从终端到后台、从日志到状态表”的推导逻辑:
2.1 确认硬件与设备层状态
- 首先排查 AGV 车载端节点与 RCS 调度系统通信,确认机器人硬件无故障、通信链路正常,车载端正处于
Waiting for Host Command(等待上位机指令)的挂起状态,排除 AGV 底盘及传感器硬件问题。
2.2 调取 PDA 端操作日志
- 调取现场作业员所持 PDA 的本地操作日志及 HTTP 请求日志。
- 分析发现:高峰期由于仓库局部 Wi-Fi 接入点(AP)漫游切换导致网络瞬间丢包,PDA 在提交最后一步“拣货完成确认”请求时,向服务端发送的 API 请求触发了 Timeout 机制。
2.3 比对 WMS 后台数据库状态表
- 使用数据库工具访问 WMS 后台,调取移库任务表与状态变更时间戳表。
- 状态机流转断点定位:WMS 系统的状态机流转设计为:
[待拣货] -> [拣货中 50%] -> [拣货中 100%] -> [接收PDA完成回执] -> [触发AGV释放指令] -> [已完成]
- 由于 PDA 的完成回执请求因网络波动未能成功落盘,导致 WMS 状态机卡在
[拣货中 100%] 阶段,未能成功触发下一阶段向 RCS/AGV 下发离场控制指令的代码块。
3. 故障处理与解决方案
- 现场紧急恢复:
- 在 WMS 后台通过运维权限,手动补发状态对齐事务,补全流转断点数据,触发上位机指令下发,快速释放集货位被卡死车队,恢复现场波次吞吐。
- 系统逻辑优化(反馈研发提单):
- 在 Jira 规范提交缺陷单,要求研发团队在 PDA 端增加离线请求重试机制与二次确认 ACK 校验机制,避免网络短时丢包直接导致前端事务丢失。
- 在 WMS/WCS 侧增加状态超时自检定时任务,对异常停滞在 100% 的单据进行二次探查,提高系统容错率。
4. 实施经验与知识沉淀
人机协同场景下的调度异常,往往“病症在 AGV,病根在终端/网络”。在本次排障完成后,项目组沉淀了以下两份 SOP 交付物:
- 《人机协同异常状态快速对齐与车队解封 SOP》:规范现场运维在遇到状态卡滞时的标准后台数据复位流程,避免盲目重启 AGV 车载系统。
- 《仓储无线网络(Wi-Fi)AP漫游与PDA丢包排查指南》:针对大屏看板与手持终端通信,明确网络测速与抓包定位标准,提升后续项目上线前的现场环境抗风险能力。
版权声明:本文为V社区用户原创内容,转载时必须标注文章的来源(V社区),文章链接、文章作者等基本信息,否则作者和本社区有权追究责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件至:
v-club@hikrobotics.com 进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容。