业务结果
检查字段是否遗漏、任务责任人与时间是否提取正确、答案是否有资料依据。记录错误类型和人工修正量,避免只统计看起来通顺的结果。
异常与权限
覆盖空输入、损坏文件、相互冲突的资料、无答案问题和无权限访问。具有工具调用能力的应用,还需要测试越权请求、重复操作及外部服务超时。
运行与费用
在约定业务量下检查响应耗时、并发、调用失败和费用记录。约定异常通知、重试上限和恢复步骤,确认管理员能够发现问题。
交接与复测
核对部署说明、账号权限、资料维护方法、接口说明和支持范围。保存验收样例与结果;后续更换模型、提示词或资料处理方式时,使用相同样例复测。