制作提示模板并开展对照评测
- 整合事实、上下文与验收要求形成模板
- 用正常、缺失和冲突案例检查模板适用范围
从一次成功到可复用方法
如果星芽读书角的一次介绍写得不错,是否可以认为以后直接复制提示就一定成功?不能。一次成功可能依赖当时资料恰好完整、任务简单或输出偶然合格。模板的价值在于保留稳定流程,把变化的信息放进明确位置。可以把读者、活动事实、未知信息、输出结构和禁止事项设为填写栏,而不是把上一次的日期与地点永远锁在模板中。复用前必须清除旧事实,防止它们被误认为新活动资料。
模板应有适用范围
本模板只适用于虚构阅读交流活动的介绍与流程草案,不适用于需要专业判断或真实身份资料的任务。模板开头可以写明仅依据用户提供资料,不查找或推断未给事实;中间放资料编号与确认状态;结尾列验收清单。指令尽量具体,避免让模型用完美、无风险等不可验证形容词给自己打分。输出如需依据,应让它指出来自哪项材料,找不到依据时标为待确认。
三类测试为何必要
先用正常案例测试结构:事实完整时能否写出规定字段。再用缺失案例测试边界:删去费用,观察是否仍写免费。最后用冲突案例测试判断:一份资料写六十分钟,另一份写九十分钟,观察是否列出差异而不是自行折中。三类案例测到不同问题,所以不能只用最顺利的输入。还可以重复使用同一输入两次,了解输出可能变化;但次数很少时只能发现部分失误,不能宣称模板具有普遍可靠性。
一份完整测试记录
给模板编号为阅读介绍版本一,记录测试输入、输出片段、事实通过与否、结构通过与否以及需修改之处。正常案例若通过四字段要求,记为结构通过;缺失案例若写免费,则事实边界失败。修改时只增加费用未提供时写待确认,不视为免费这一项,形成版本二,并重新运行全部案例。重新检查正常案例很重要,因为解决一个问题的改动也可能让其他部分变差,这叫回归检查。没有实际使用AI工具时,可用课程给出的模拟输出练习评审,不要把手工推演写成真实运行结果。
何时结束与何时升级
模板完成并不是无人审阅的授权。事先设定验收条件:所有提供事实保持一致、未知项明确标记、冲突有来源、无敏感信息、字段完整。全部通过后仍由负责人确认最终发布内容。如果接入自动化系统,除了提示模板,还需要输入校验、权限限制、失败处理和日志等工程措施。当前课程做的是展示和练习,不是生产上线。学习的终点不是掌握一句万能提示,而是能解释模板解决了什么、尚未解决什么,并在变化的输入下持续检查。
本节要点
- 模板要区分固定规则与可变资料
- 正常、缺失和冲突输入应分别测试
- 修改后重测旧案例,避免修好一处损坏另一处
动手练习:交付提示模板与三条测试记录
- 编写包含读者、资料编号、未知项、结构与禁止事项的填写式模板
- 分别准备完整资料、缺费用、时长冲突三种输入
- 给每种输入写预期输出与核验条件,并注明是模拟还是实际测试
自查清单
- 模板留有可变输入栏,旧事实不混入规则
- 三类测试有预期、观察与通过条件
先自己做,再查看参考答案
模板示范:请为指定读者介绍以下虚构阅读活动,资料按编号列出,已确认事实与未知项分开。只使用已确认信息;费用缺失时写待确认,不推断免费;冲突没有优先规则时单列差异。输出标题、适合对象、活动安排和待确认信息,并附来源编号。测试记录可以写:完整资料应四字段齐全;删去费用应明确未知且无免费字样;六十与九十分钟冲突应同时列出依据并要求确认。每条记录还需填写观察到的输出、通过项和失败项。若只在纸上推演,应注明模拟评审,不能声称已经运行某个AI模型并获得稳定效果。