训练路径
用帮助性、事实性、安全边界和偏好排序标准评估回答质量。
01 入门判断02 常见误区03 练习顺序04 完成标准
核心概念
帮助性看回答是否解决用户目标,不等于回答越长越好。
事实性需要核对样本证据,不能用表达自信程度代替核验。
安全边界是独立维度,有帮助但越界的回答仍需要扣分。
偏好排序要比较完整性、结构、风险提示和可执行性。
常见误区
把个人喜欢的文风当成评分标准。
只看回答流畅度,不核对事实。
因为回答有帮助就忽略安全缺口。
01判断步骤
先复述用户真实目标。
02判断步骤
逐项核对回答是否覆盖目标。
03判断步骤
检查事实、边界和安全提示。
04判断步骤
用可复述的维度给出偏好排序。
05适合人群
准备做模型回答评分、偏好排序或人工智能训练师任务的学习者。
06完成标准
完成 8 道以上评测相关题,并能说明每道错题的评分维度。
有帮助但缺少安全提示回答给出数据导出步骤,但没有提示脱敏和权限检查。
练习评测题帮助性可以给分,但安全边界维度应扣分,并说明缺少脱敏和权限检查。