CUSTOMER FEEDBACK → ACTIONABLE SIGNALS

从工单到可追溯的问题簇与候选改进。

面向项目协作 SaaS 的客户反馈工作流:结构化工单、识别重复问题、生成待人工确认的 SOP 候选,并输出每条结论都能回到原始工单的周报。

打开交互演示 →
模型负责摘要、类别建议和待确认原因;确定性服务负责证据定位、责任路由、严重度和升级;人工负责纠正与审核。
个人作品集演示:本页基于合成数据展示可审计机制,不是生产服务,也不代表真实业务收益。
该项目已开源,完整源码及 Docker 部署配置见 GitHub 仓库。
GitHub 仓库 →
合成工单240180 演示 + 60 锁定集
已发布工作流4真实 API 回放
当前问题簇4020 重复簇 + 20 单例
候选 SOP20不进入正式知识库

从工单到改进建议

01导入

CSV 或在线虚构工单,先脱敏、限长和幂等。

02结构化

Dify/DeepSeek 提供摘要、分类和逐字 quote。

03硬门

服务端定位 offset,并用规则裁决责任方与升级。

04聚类

BGE 向量识别重复问题,保留错误合并与拆分案例。

05改进

候选 SOP 和周报均保留 ticket_id 证据入口。

系统刻意不做

  • 不把根因假设写成事实。
  • 不让模型自报 confidence 决定自动化。
  • 不让候选 SOP 自动污染正式知识库。
  • 不使用合成数据声称真实效率收益。

V7 当前证据边界

  • 锁定合成集 N=60,Schema 契约有效率与 quote 定位成功率均为 100%。
  • 问题类型 Macro-F1 0.846、产品区域 Macro-F1 0.963、责任路由一致率 85.0%。
  • 重复识别精确率 84.2%、召回率 53.3%、聚类纯度 96.7%、B³ F1 0.853,九项已测门禁全部通过。
  • V5/V6 失败历史仍公开;AI 辅助复核不等于独立人工审计,真实业务收益尚未证明。

周报不会偷换“观察”和“原因”

观察近 7 天有 12 条工单指向“导入后字段映射异常”。
证据T021、T044、T087。
待确认原因可能与 CSV 字段映射提示不足有关。
建议动作产品运营确认导入页提示,客户成功更新排查话术。