验收前置准备:提前固化三类核心规则
验收前需将三类规则写入开工文档,验收时不得临时更换:固定30-50个覆盖信息型、比较型、决策型的用户问题集,明确测试的AI平台清单,统一提问措辞和时间窗口。假设某五金企业开工前就固定40个产品选型类问题,可避免后期对比口径混乱。核对步骤:核对开工文档是否留存完整的三类规则记录。
分层指标验收:按属性设定达标标准
基础可读性指标要求100%通过,需确认robots放行、schema配置正确、目标页面可被抓取;引用覆盖要求至少30%核心业务页面被AI引用;答案准确性要求引用内容无事实偏差;业务转化类指标需拉长观察周期,不纳入单次验收判定。核对步骤:逐一核对四类指标的实际达标情况,不混同考核尺度。
争议处理与留痕:全量留存原始测试记录
每轮测试需完整保存AI原始回答和对应的时间戳,避免因模型采样波动产生争议。如果出现双方测试结果不一致的情况,当场用同一问题、同一环境复现测试,提前约定可控页面范围,避免引用页面归属纠纷。核对步骤:检查是否留存所有测试的原始回答文本或截图记录。