交互与用户体验 / 系统课时

收集答案反馈并形成纠错入口

收集答案反馈并形成纠错入口

当用户发现 AI 回答不准确、没有解决问题或引用来源存在错误时,需要一个低成本的反馈入口。本课设计从有用性评价、原因选择到纠错补充的完整交互,并建立反馈与事实核验的分流机制,让用户知道意见已提交,也让产品团队能够定位和处理具体问题。

学习目标

  • 设计有用性评价的出现时机、操作位置和交互反馈。
  • 组织问题原因选择与纠错补充,减少用户提交成本。
  • 区分主观评价与事实核验,定义反馈处理状态和验收标准。

确定反馈入口的出现时机

反馈入口应绑定一条具体的助手回答,而不是整个会话。用户可能认可第一条回答,却认为重新生成的第二条存在错误,因此每条回答及其版本都需要独立的反馈记录。

推荐采用以下显示规则:

回答状态 反馈入口 用户可执行操作
等待首字 不显示评价按钮 等待或取消请求
流式生成中 暂不显示评价按钮 停止生成
正常完成 显示有用、没用 提交评价或补充原因
用户主动停止 标记内容未完成 继续任务或重新回答
超时或异常截断 显示异常提示 重试或查看错误信息

在正常完成的回答底部,将有用和没用按钮放在复制、重新回答等操作附近。不要把评价入口放在长答案开头,也不要在流式输出过程中突然插入评价弹窗。

桌面端可通过鼠标悬停增强按钮的视觉提示,但不能只在悬停时提供入口;移动端必须支持直接点击。建议触控目标至少为 44×44 CSS px,避免相邻按钮误触。

用两阶段交互收集评价和原因

第一阶段只询问一个问题:这条回答是否有用?提供有用和没用两个选项,不强迫用户解释原因。

点选后发起保存请求,服务端确认后才提示“已收到反馈”。选择“没用”同时展开可选原因面板。使用带名称的原生按钮,切换态可用 aria-pressed 表达,保存状态放到已有的 role="status" 区域。

原因选项建议支持多选:

  • 事实有误:数字、时间、结论或客观描述不准确。
  • 没有回答问题:遗漏关键需求或偏离原始任务。
  • 表达不清楚:结构混乱、术语难懂或步骤不明确。
  • 引用来源有问题:链接打不开、引用位置错误或来源不支持结论。
  • 其他问题:无法归入已有分类。

面板底部提供一个可选文本框,提示文案为:你希望我们纠正什么?建议最多输入 500 字,允许用户提供来源位置。链接和原文都作为待核验的输入,避免自动请求任意 URL 或把它直接作为可信证据。

例如,用户看到某个虚构商城的 AI 回答写着退款期限为 7 天,而该商城提供的政策文件明确写着 14 天,可以选择事实有误,并补充具体条款位置。

用户点击提交后,显示已收到反馈,而不是错误已修复。关闭面板不得影响当前回答,已输入的内容在提交前也不应因为误触关闭而直接丢失。

将纠错建议与事实核验分开处理

没用代表用户认为回答没有帮助,并不能直接证明内容错误。同样,用户填写了一个纠正数字,也不意味着这个数字必然正确。

产品应将反馈分为两条处理路径:体验类反馈进入内容与交互改进队列;事实错误、引用错误进入证据核验队列。事实核验还需要判断来源权威性、适用范围、发布时间及原文是否真正支持用户的修正。

推荐执行流程如下:

  1. 保存反馈对应的消息标识、回答版本、评价原因与用户补充内容。
  2. 根据原因分诊;事实和来源问题创建待核验记录,表达和任务匹配问题进入体验改进队列。
  3. 核验人员或专门的核验流程比对原始回答、引用材料及用户提交的依据。
  4. 证据充分时标记已确认错误,并形成纠错说明;证据不足时标记暂未证实,不自动采纳用户说法。
  5. 对已确认的错误提供可追溯的更正说明,保留原回答版本;若生成修订版,应明确标识版本变化。

答案反馈、问题分诊与纠错核验流程

对于需要进一步核验的问题,界面可以显示反馈已提交或核验中,但只有后端确实维护并提供对应状态时才能显示。不要仅凭用户点击没用就给回答加上事实错误标签。

定义反馈记录和交互验收标准

为了支持统计和追溯,反馈关联当前租户、已认证用户、消息标识和回答版本。记录评价、原因、提交时间、记录版本与核验状态。评价撤销和更正记录按业务留存策略处理。补充文字及来源依据按需存储,并支持用户修改或撤销评价。

用版本和操作标识保护反馈

下面是可运行的服务端逻辑夹具,保存为 feedback.mjs。接口从认证上下文获取用户。存储以租户、用户、回答 ID 和回答版本作为唯一键。重复提交同一次变更返回原确认;旧页面上的写入通过记录版本检查被拒绝。这里用同步内存映射演示。多进程实现应使用数据库唯一约束和原子版本更新。

js
const reasonCodes = new Set(["fact", "irrelevant", "unclear", "citation", "other"]);
const answers = new Map([
  ["a1", { tenant: "t1", user: "u1", completedVersions: new Set(["v1", "v2"]) }],
]);
const records = new Map();

function submitFeedback(actor, command) {
  if (!command || typeof command !== "object" || Array.isArray(command)) return { status: "invalid" };
  const { answerId, answerVersion, requestId, expectedRevision, vote, reasons } = command;
  const answer = answers.get(answerId);
  if (!answer || answer.tenant !== actor.tenant || answer.user !== actor.user
      || !answer.completedVersions.has(answerVersion)) return { status: "unavailable" };
  if (
    typeof requestId !== "string" || !requestId.trim() || requestId.length > 128
    || !Number.isSafeInteger(expectedRevision) || expectedRevision < 0
    || expectedRevision === Number.MAX_SAFE_INTEGER || !["yes", "no", null].includes(vote)
    || !Array.isArray(reasons) || reasons.length > reasonCodes.size
    || reasons.some(reason => !reasonCodes.has(reason)) || (vote !== "no" && reasons.length > 0)
  ) return { status: "invalid" };

  const key = JSON.stringify([actor.tenant, actor.user, answerId, answerVersion]);
  const normalized = [...new Set(reasons)].sort();
  const signature = JSON.stringify([expectedRevision, vote, normalized]);
  const previous = records.get(key);
  if (previous?.requestId === requestId) {
    return previous.signature === signature ? previous.receipt : { status: "request_conflict" };
  }
  if ((previous?.revision ?? 0) !== expectedRevision) return { status: "stale_revision" };
  const revision = expectedRevision + 1;
  const receipt = Object.freeze({ status: "recorded", revision });
  records.set(key, { requestId, signature, receipt, revision, vote, reasons: normalized });
  return receipt;
}

const actor = { tenant: "t1", user: "u1" };
const initial = {
  answerId: "a1", answerVersion: "v1", requestId: "r1",
  expectedRevision: 0, vote: "no", reasons: ["citation"],
};
console.log(submitFeedback(actor, initial));
console.log(submitFeedback(actor, initial));
console.log(submitFeedback(actor, { ...initial, requestId: "r2", vote: "yes", reasons: [] }));
console.log(submitFeedback(actor, { ...initial, requestId: "r3", answerVersion: "v2" }));

预期输出

text
{ status: 'recorded', revision: 1 }
{ status: 'recorded', revision: 1 }
{ status: 'stale_revision' }
{ status: 'recorded', revision: 1 }

vote: null 表示撤销评价,仍推进记录版本以阻止旧请求恢复它。示例只记住最近一次操作,更旧的重放通过版本门禁拒绝。生产可将需要跨较长时间重放的操作标识另行持久化。核验流程使用独立状态,投票保存成功不直接表示事实已核实。自由文本只在必要时保存,并设定可见范围与留存时间。

可以使用以下验收场景检查原型:

测试场景 预期行为
回答正在生成 不出现最终有用性评价
用户点击有用 一次点击完成评价并获得确认
用户点击没用 展开原因选择,不强制填写文字
用户提交纠错 记录当前回答版本与具体依据
同一回答重新评价 更新当前评价,不重复累计投票
事实错误尚未核实 不显示已纠正或已证实
生成新的回答版本 新旧版本的反馈分别关联

进行一次包含 10 名参与者的可用性测试,让他们分别完成有用评价和事实纠错提交。建议将至少 8 人能在 20 秒内找到入口并提交纠错作为初步原型目标,再根据真实任务难度调整。

上线后分别观察评价参与率、原因补充率、纠错核验通过率和平均核验耗时。不能仅用点赞比例衡量答案事实准确率,也不能把用户提出的纠正建议自动计入已确认错误数量。

最终应保证三个结果:普通用户可以快速表达有用或没用;发现错误的用户能够提供具体证据;产品团队能够从一条反馈追溯到原始回答、核验结论和后续更正,而不会静默覆盖历史内容。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

收集答案反馈并形成纠错入口

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通