交互与用户体验 / 系统课时
收集答案反馈并形成纠错入口
收集答案反馈并形成纠错入口
当用户发现 AI 回答不准确、没有解决问题或引用来源存在错误时,需要一个低成本的反馈入口。本课设计从有用性评价、原因选择到纠错补充的完整交互,并建立反馈与事实核验的分流机制,让用户知道意见已提交,也让产品团队能够定位和处理具体问题。
学习目标
- 设计有用性评价的出现时机、操作位置和交互反馈。
- 组织问题原因选择与纠错补充,减少用户提交成本。
- 区分主观评价与事实核验,定义反馈处理状态和验收标准。
确定反馈入口的出现时机
反馈入口应绑定一条具体的助手回答,而不是整个会话。用户可能认可第一条回答,却认为重新生成的第二条存在错误,因此每条回答及其版本都需要独立的反馈记录。
推荐采用以下显示规则:
| 回答状态 | 反馈入口 | 用户可执行操作 |
|---|---|---|
| 等待首字 | 不显示评价按钮 | 等待或取消请求 |
| 流式生成中 | 暂不显示评价按钮 | 停止生成 |
| 正常完成 | 显示有用、没用 | 提交评价或补充原因 |
| 用户主动停止 | 标记内容未完成 | 继续任务或重新回答 |
| 超时或异常截断 | 显示异常提示 | 重试或查看错误信息 |
在正常完成的回答底部,将有用和没用按钮放在复制、重新回答等操作附近。不要把评价入口放在长答案开头,也不要在流式输出过程中突然插入评价弹窗。
桌面端可通过鼠标悬停增强按钮的视觉提示,但不能只在悬停时提供入口;移动端必须支持直接点击。建议触控目标至少为 44×44 CSS px,避免相邻按钮误触。
用两阶段交互收集评价和原因
第一阶段只询问一个问题:这条回答是否有用?提供有用和没用两个选项,不强迫用户解释原因。
点选后发起保存请求,服务端确认后才提示“已收到反馈”。选择“没用”同时展开可选原因面板。使用带名称的原生按钮,切换态可用 aria-pressed 表达,保存状态放到已有的 role="status" 区域。
原因选项建议支持多选:
- 事实有误:数字、时间、结论或客观描述不准确。
- 没有回答问题:遗漏关键需求或偏离原始任务。
- 表达不清楚:结构混乱、术语难懂或步骤不明确。
- 引用来源有问题:链接打不开、引用位置错误或来源不支持结论。
- 其他问题:无法归入已有分类。
面板底部提供一个可选文本框,提示文案为:你希望我们纠正什么?建议最多输入 500 字,允许用户提供来源位置。链接和原文都作为待核验的输入,避免自动请求任意 URL 或把它直接作为可信证据。
例如,用户看到某个虚构商城的 AI 回答写着退款期限为 7 天,而该商城提供的政策文件明确写着 14 天,可以选择事实有误,并补充具体条款位置。
用户点击提交后,显示已收到反馈,而不是错误已修复。关闭面板不得影响当前回答,已输入的内容在提交前也不应因为误触关闭而直接丢失。
将纠错建议与事实核验分开处理
没用代表用户认为回答没有帮助,并不能直接证明内容错误。同样,用户填写了一个纠正数字,也不意味着这个数字必然正确。
产品应将反馈分为两条处理路径:体验类反馈进入内容与交互改进队列;事实错误、引用错误进入证据核验队列。事实核验还需要判断来源权威性、适用范围、发布时间及原文是否真正支持用户的修正。
推荐执行流程如下:
- 保存反馈对应的消息标识、回答版本、评价原因与用户补充内容。
- 根据原因分诊;事实和来源问题创建待核验记录,表达和任务匹配问题进入体验改进队列。
- 核验人员或专门的核验流程比对原始回答、引用材料及用户提交的依据。
- 证据充分时标记已确认错误,并形成纠错说明;证据不足时标记暂未证实,不自动采纳用户说法。
- 对已确认的错误提供可追溯的更正说明,保留原回答版本;若生成修订版,应明确标识版本变化。

对于需要进一步核验的问题,界面可以显示反馈已提交或核验中,但只有后端确实维护并提供对应状态时才能显示。不要仅凭用户点击没用就给回答加上事实错误标签。
定义反馈记录和交互验收标准
为了支持统计和追溯,反馈关联当前租户、已认证用户、消息标识和回答版本。记录评价、原因、提交时间、记录版本与核验状态。评价撤销和更正记录按业务留存策略处理。补充文字及来源依据按需存储,并支持用户修改或撤销评价。
用版本和操作标识保护反馈
下面是可运行的服务端逻辑夹具,保存为 feedback.mjs。接口从认证上下文获取用户。存储以租户、用户、回答 ID 和回答版本作为唯一键。重复提交同一次变更返回原确认;旧页面上的写入通过记录版本检查被拒绝。这里用同步内存映射演示。多进程实现应使用数据库唯一约束和原子版本更新。
const reasonCodes = new Set(["fact", "irrelevant", "unclear", "citation", "other"]);
const answers = new Map([
["a1", { tenant: "t1", user: "u1", completedVersions: new Set(["v1", "v2"]) }],
]);
const records = new Map();
function submitFeedback(actor, command) {
if (!command || typeof command !== "object" || Array.isArray(command)) return { status: "invalid" };
const { answerId, answerVersion, requestId, expectedRevision, vote, reasons } = command;
const answer = answers.get(answerId);
if (!answer || answer.tenant !== actor.tenant || answer.user !== actor.user
|| !answer.completedVersions.has(answerVersion)) return { status: "unavailable" };
if (
typeof requestId !== "string" || !requestId.trim() || requestId.length > 128
|| !Number.isSafeInteger(expectedRevision) || expectedRevision < 0
|| expectedRevision === Number.MAX_SAFE_INTEGER || !["yes", "no", null].includes(vote)
|| !Array.isArray(reasons) || reasons.length > reasonCodes.size
|| reasons.some(reason => !reasonCodes.has(reason)) || (vote !== "no" && reasons.length > 0)
) return { status: "invalid" };
const key = JSON.stringify([actor.tenant, actor.user, answerId, answerVersion]);
const normalized = [...new Set(reasons)].sort();
const signature = JSON.stringify([expectedRevision, vote, normalized]);
const previous = records.get(key);
if (previous?.requestId === requestId) {
return previous.signature === signature ? previous.receipt : { status: "request_conflict" };
}
if ((previous?.revision ?? 0) !== expectedRevision) return { status: "stale_revision" };
const revision = expectedRevision + 1;
const receipt = Object.freeze({ status: "recorded", revision });
records.set(key, { requestId, signature, receipt, revision, vote, reasons: normalized });
return receipt;
}
const actor = { tenant: "t1", user: "u1" };
const initial = {
answerId: "a1", answerVersion: "v1", requestId: "r1",
expectedRevision: 0, vote: "no", reasons: ["citation"],
};
console.log(submitFeedback(actor, initial));
console.log(submitFeedback(actor, initial));
console.log(submitFeedback(actor, { ...initial, requestId: "r2", vote: "yes", reasons: [] }));
console.log(submitFeedback(actor, { ...initial, requestId: "r3", answerVersion: "v2" }));预期输出
{ status: 'recorded', revision: 1 }
{ status: 'recorded', revision: 1 }
{ status: 'stale_revision' }
{ status: 'recorded', revision: 1 }vote: null 表示撤销评价,仍推进记录版本以阻止旧请求恢复它。示例只记住最近一次操作,更旧的重放通过版本门禁拒绝。生产可将需要跨较长时间重放的操作标识另行持久化。核验流程使用独立状态,投票保存成功不直接表示事实已核实。自由文本只在必要时保存,并设定可见范围与留存时间。
可以使用以下验收场景检查原型:
| 测试场景 | 预期行为 |
|---|---|
| 回答正在生成 | 不出现最终有用性评价 |
| 用户点击有用 | 一次点击完成评价并获得确认 |
| 用户点击没用 | 展开原因选择,不强制填写文字 |
| 用户提交纠错 | 记录当前回答版本与具体依据 |
| 同一回答重新评价 | 更新当前评价,不重复累计投票 |
| 事实错误尚未核实 | 不显示已纠正或已证实 |
| 生成新的回答版本 | 新旧版本的反馈分别关联 |
进行一次包含 10 名参与者的可用性测试,让他们分别完成有用评价和事实纠错提交。建议将至少 8 人能在 20 秒内找到入口并提交纠错作为初步原型目标,再根据真实任务难度调整。
上线后分别观察评价参与率、原因补充率、纠错核验通过率和平均核验耗时。不能仅用点赞比例衡量答案事实准确率,也不能把用户提出的纠正建议自动计入已确认错误数量。
最终应保证三个结果:普通用户可以快速表达有用或没用;发现错误的用户能够提供具体证据;产品团队能够从一条反馈追溯到原始回答、核验结论和后续更正,而不会静默覆盖历史内容。