在装备制造场景做了一轮实验:将设备手册、工艺卡与历史告警记录切分为带层级的片段,建立关键词与向量混合检索,由大模型生成答案,并强制回引原文片段编号。目标是让一线人员查参数、查处置步骤时,看到的不只是结论,还有出处。
阶段进展:
· 180 道现场真实问题评测中,答案引用可溯源率约 92%,引用片段与答案不一致的比例降至 6% 以下;检索失败主要集中在需要跨多本手册的多跳问题。
· 参数类问题(如某型号扭矩区间、温区设定)准确率明显高于故障处置类,后者受日志时间粒度与描述口径影响较大。
下一步计划:将工单与点检记录按时间线接入上下文,验证跨文档推理与时效性冲突时的取值策略,并补充“证据不足时应拒答”的评测项。

评论