大模型应用开发 / 系统课时
识别知识冲突与版本差异
识别知识冲突与版本差异
同一个用户问题可能同时命中旧手册、新公告和不同部门的 FAQ。真正危险的不是“找到多条证据”,而是系统没有识别版本过期或事实冲突就直接生成。本节建立一套可落地的冲突识别、裁决和人工升级流程。
学习目标
- 区分版本差异、事实冲突和来源优先级冲突
- 用有效期、版本和权威等级裁决可自动处理的证据
- 在无法安全裁决时停止生成并向人工暴露冲突依据
先区分差异与真正的冲突
检索结果文字不同,并不代表知识冲突。两段内容可能只是措辞不同,例如“7 个自然日”和“七天内”表达同一规则。系统应先把证据归一到可比较的事实主张,再判断是否存在互斥结论。
版本差异通常有明确时间关系:旧文档曾经正确,但已经被新规则替代。事实冲突则是两条当前仍有效的证据对同一条件给出不同答案。还有一种更棘手的情况:最新内容来自低优先级 FAQ,而正式政策文件虽然更早,却仍处于有效期,此时“最新”和“最权威”不能简单等同。
因此,冲突检测至少需要比较四类信息:问题或事实键、主张内容、有效时间范围、来源权威等级。不要让大模型仅凭文字风格猜哪份材料更可信,权威等级应由知识库治理规则显式提供。
给证据补齐可裁决的元数据
进入生成模型之前,每个证据片段最好携带 source、version、valid_from、valid_to 和 authority 等字段。valid_to 为空可以表示当前仍有效,authority 则用于表达正式制度、产品公告、客服 FAQ 等来源之间的业务优先级。
裁决顺序建议保持稳定:先剔除当前时间点已经失效的材料,再对同一事实键聚合证据;如果有效证据结论一致,可以继续回答;如果结论不同,则同时检查时间和权威等级。只有业务规则能够明确决定优先级时才自动选择,否则进入冲突状态。

用最小程序验证裁决逻辑
下面的示例把查询时点固定为 2026-09-13。历史手册已经失效,因此先被过滤;剩余两条证据都有效,但最新 FAQ 与最高权威的正式政策给出了不同退款期限,程序不会擅自选择其中之一。
from dataclasses import dataclass
@dataclass(frozen=True)
class Evidence:
source: str
version: str
valid_from: str
valid_to: str | None
authority: int
claim: str
as_of = "2026-09-13"
evidence = [
Evidence("退款政策", "v2", "2026-06-01", None, 100, "签收后7天内可申请退款"),
Evidence("客服FAQ", "v3", "2026-08-15", None, 70, "签收后15天内可申请退款"),
Evidence("历史手册", "v1", "2025-01-01", "2026-06-01", 90, "签收后30天内可申请退款"),
]
def is_valid(item: Evidence) -> bool:
# 有效期采用左闭右开,避免新旧版本在切换日同时生效。
return item.valid_from <= as_of and (item.valid_to is None or as_of < item.valid_to)
active = [item for item in evidence if is_valid(item)]
latest = max(active, key=lambda item: item.valid_from)
most_authoritative = max(active, key=lambda item: item.authority)
claims = {item.claim for item in active}
print(f"有效证据: {len(active)}")
print(f"检测到 {len(claims)} 种答案")
if len(claims) == 1:
print(f"结论: {latest.claim}")
elif latest.claim == most_authoritative.claim:
print(f"结论: {latest.claim}")
else:
print("结论: 版本与权威性冲突,转人工确认")预期输出:
有效证据: 2
检测到 2 种答案
结论: 版本与权威性冲突,转人工确认实际系统还应把查询时点、事实键以及参与裁决的证据 ID 写入诊断日志,便于之后追踪为什么某次回答被阻断。若版本号不是天然可排序的时间值,应依赖显式发布时间或生效时间,而不是直接比较 v2、v10 这样的字符串。
无法裁决时不要把矛盾藏进答案
当当前有效且高权威的证据仍然互相矛盾,最安全的行为不是让模型“综合一下”,而是把状态标记为冲突。面向用户可以说明“知识库中存在两项不同规定,暂时无法确认唯一答案”,同时将来源、版本、生效时间和冲突主张提交给人工处理。
人工确认后还应回到知识治理环节:撤销错误版本、补齐失效时间,或者调整来源优先级。只有这样,冲突才真正被消除;如果只是本次会话里人工回答,下一次检索仍会重复触发同一个问题。