ARTICLE · INTELLIGENCE

战地情报 · 详情页

来自尧图项目组的一线实战观察与深度解析

Multi-Agent工单系统设计与优化实践

Multi-Agent工单系统设计与优化实践

1. 工单处理Multi-Agent系统设计概述

工单处理系统是企业服务流程中的核心环节,传统单Agent方案在处理复杂工单时往往捉襟见肘。我们设计的Multi-Agent系统将工单生命周期拆解为四个专业化Agent:分类Agent、补全Agent、执行Agent和回访Agent,每个Agent专注解决特定问题域。这种分工模式使得系统整体处理效率提升3-5倍,错误率降低60%以上。

这套系统的创新点在于建立了标准化的Agent间通信协议。我们采用JSON-RPC over WebSocket实现实时数据交换,每个工单状态变更都会触发事件总线通知相关Agent。例如当分类Agent完成工单标记后,会自动触发补全Agent的工作流程,整个过程无需人工干预。

2. 分类Agent的实现细节

2.1 多层级分类体系构建

我们的分类体系采用三级树状结构:

  • 一级分类:按业务部门划分(IT/财务/人事等)
  • 二级分类:按问题类型划分(硬件/软件/网络等)
  • 三级分类:按具体症状划分(蓝屏/无法联网等)

分类模型采用BERT+BiLSTM的混合架构,在内部数据集上达到92.3%的准确率。关键技巧是在模型最后层添加注意力机制,使模型能够聚焦工单文本中的关键词汇。

class ClassificationModel(nn.Module): def __init__(self, bert_model, num_classes): super().__init__() self.bert = bert_model self.bilstm = nn.LSTM(768, 384, bidirectional=True) self.attention = nn.Sequential( nn.Linear(768, 256), nn.Tanh(), nn.Linear(256, 1, bias=False) ) self.classifier = nn.Linear(768, num_classes) def forward(self, input_ids, attention_mask): outputs = self.bert(input_ids, attention_mask) sequence_output = outputs.last_hidden_state lstm_output, _ = self.bilstm(sequence_output) attention_weights = F.softmax(self.attention(lstm_output), dim=1) context_vector = torch.sum(attention_weights * lstm_output, dim=1) return self.classifier(context_vector)

2.2 分类结果置信度校准

我们发现直接使用模型输出的概率值作为置信度会导致误判,因此采用温度缩放(Temperature Scaling)进行校准:

  1. 在验证集上训练温度参数T
  2. 应用公式:q_i = exp(z_i/T) / ∑exp(z_j/T)
  3. 当校准后置信度<85%时触发人工复核流程

重要提示:分类模型的训练数据需要定期更新,建议每季度补充最新工单样本重新训练,否则模型性能会随时间衰减15-20%。

3. 补全Agent的智能填充技术

3.1 上下文感知的表单补全

补全Agent的核心是理解不完整工单的隐含信息。我们开发了基于模板的智能填充系统:

  1. 提取工单中的实体信息(设备编号、员工ID等)
  2. 查询CMDB、HR系统等数据源获取完整信息
  3. 根据分类结果选择对应模板
  4. 使用GPT-3.5生成自然语言补充说明
graph TD A[原始工单] --> B(实体识别) B --> C{是否完整?} C -->|是| D[转执行Agent] C -->|否| E[查询外部系统] E --> F[模板匹配] F --> G[生成补充内容] G --> H[人工确认] H --> D

3.2 多源数据验证机制

为避免补全信息错误,我们建立了三重验证:

  1. 跨系统数据一致性检查(如员工部门信息在HR系统与AD中的对比)
  2. 历史工单模式匹配(相似工单的字段补全记录)
  3. 时效性验证(设备保修状态等会过期的信息)

补全效率对比:

补全方式平均耗时准确率
人工补全15分钟98%
规则引擎2分钟82%
我们的AI补全45秒94%

4. 执行Agent的工作流引擎

4.1 动态工作流编排

执行Agent采用基于Petri网的工作流引擎,关键特性包括:

  • 条件分支:根据工单属性选择不同处理路径
  • 并行任务:同时触发多个无关操作
  • 超时回滚:未完成操作自动撤销
  • 人工介入点:特定节点等待审批

典型IT工单处理流程:

  1. 创建故障工单
  2. 分配技术支持人员
  3. 技术人员诊断
  4. 如需备件 → 走采购流程
  5. 实施解决方案
  6. 验证问题解决

4.2 外部系统集成模式

我们设计了三种集成方式应对不同系统:

  1. REST API直连(用于现代云服务)
  2. 数据库中间表(用于老旧系统)
  3. RPA机器人(用于无API的GUI系统)

执行日志示例:

{ "ticket_id": "INC-2023-0456", "actions": [ { "time": "2023-05-06T10:23:45Z", "action": "reset_password", "target": "user02345", "status": "success", "duration": "12.3s" }, { "time": "2023-05-06T10:24:02Z", "action": "send_notification", "channel": "email", "status": "failed", "retry_success": true } ] }

5. 回访Agent的客户满意度提升

5.1 多模态反馈收集

回访Agent不仅发送标准问卷,还提供:

  • 语音反馈:通过ASR转为文本分析
  • 表情评分:😊/😐/😞 三档快速评价
  • NPS调查:1-10分推荐意愿评分

反馈分析模型识别三类关键信息:

  1. 明确抱怨("速度太慢"等直接负面评价)
  2. 隐含不满("还行吧"等中性表达中的负面情绪)
  3. 改进建议("希望增加XX功能"等建设性意见)

5.2 智能补救策略

根据满意度评分自动触发不同补救流程:

评分区间响应策略升级路径
9-10分发送感谢信无
7-8分请求详细建议客服经理审核
4-6分人工回访服务改进会议
0-3分补偿方案高层介入

回访阶段发现的23%问题会导致工单重新开启,形成闭环改进机制。我们特别设计了情绪安抚话术库,当检测到客户愤怒时自动选用最温和的沟通方式。

6. 系统部署与性能优化

6.1 分布式Agent部署架构

生产环境部署方案:

  • 每个Agent独立部署在K8s Pod中
  • 使用Redis Stream实现事件总线
  • PostgreSQL作为统一数据存储
  • Prometheus+Grafana监控体系

资源分配建议:

Agent类型CPU内存实例数
分类4核16GB2
补全8核32GB3
执行2核8GB5
回访2核4GB2

6.2 并发控制策略

我们改进的CoAgent并发控制算法:

  1. 工单哈希分片到不同处理通道
  2. 通道内顺序处理
  3. 关键资源采用乐观锁
  4. 冲突时按优先级排队

性能测试结果:

并发工单数平均处理时间超时率
1002.1分钟0.2%
5002.8分钟1.7%
10003.5分钟3.4%

系统瓶颈主要在补全Agent的外部系统查询延迟,我们通过以下优化手段将查询耗时从3.2秒降至1.4秒:

  • 建立本地缓存层
  • 批量查询代替单次请求
  • 设置查询超时熔断

7. 实施经验与教训

在实际部署中,我们总结了这些关键经验:

  1. 分类模型需要定期用新数据重新训练,我们发现模型性能每月会自然下降约2%,必须建立持续学习机制

  2. 补全Agent最容易产生技术债务,必须严格管理模板版本:

    • 使用Git管理模板变更
    • 新模板必须通过测试才能上线
    • 保留旧模板的回滚能力
  3. 执行Agent的权限管理要格外小心:

    # 错误的权限设置示例 chmod 777 execute_script.sh # 正确的权限设置 chown agent:agent execute_script.sh chmod 750 execute_script.sh
  4. 回访阶段收集的客户反馈应该反向影响分类体系,我们建立了反馈驱动的分类优化流程:

    客户抱怨 → 分析根本原因 → 检查分类准确性 → 必要时新增分类标签 → 更新模型训练数据

  5. 监控系统必须覆盖所有关键指标:

    • 各Agent的队列长度
    • 处理延迟百分位数(P99特别重要)
    • 外部依赖可用性
    • 资源使用率

这套Multi-Agent工单系统在我们客户的生产环境中平均减少了57%的工单处理时间,客户满意度提升了22个百分点。最大的收获是认识到清晰的Agent职责划分比追求单个Agent的复杂能力更重要。

RELATED READING

延伸阅读

更多一线实战笔记与深度复盘,助您持续精进