写给模型看的说明:该给规则,还是该给例子
江南 · · 约 2274 字
规则告诉模型什么必须成立、什么出现了就算错。例子展示一种容易说不清的格式长什么样。两者都要时,规则在前,例子在后,并写明冲突时以规则为准。只有例子,模型模仿的是表面;只有规则,格式类的要求有时会落空。不要用增加语气来代替这个分工。
模板和 Skill 谁来承载这些句子,见Skill 和提示词模板到底差在哪。例子若把虚构数字写进了正式任务,那是幻觉的一种进入方式,见模型幻觉通常从哪来。
用规则写可以打勾的边界
适合写成规则的,是另一个人可以判定对错的句子。
- 不出现材料以外的数字、期限、比例和专名。
- 第一段必须回答标题,并且包含不适用的边界。
- 材料没有依据的判断单独标成“材料未提及”,不写进结论。
- 站内链接只使用草稿里已给出的地址,不新造路径。
这些句子不需要例子也能检查。把它们写成“尽量准确、保持专业”就无法检查。规则要短。一条规则里塞进三个互不相关的禁区,违反其中之一时,你不知道该改哪一句。
规则放在说明的前部,靠近任务,而不是放在长篇角色介绍之后。放得越后,越容易在长材料中间失去作用。
例子只补规则说不清的形状
有些要求用规则会过长,例如“定义句的形状”。与其写十条例外,不如给一则短例:
规则:第一句定义对象,第二句写边界。不要使用例子中的产品和数字。
例子:对象“延迟”定义为从请求离开发送方到收到完整响应。边界:只计这一段,不计用户阅读页面的时间。
例子里的词是占位,不是这次的材料。紧挨着写“不要把‘延迟’或任何示例数字写入正式输出,除非材料本身在讨论它”。没有这句,下一篇关于价格的文章可能突然出现一段网络延迟的定义,因为例子是最近、最完整的句式。
反例只在某种错误反复出现时加一则。反例要标明“这是错误,不要模仿”,并指出它违反了哪一条规则,例如把“7 日内”写成了“随时”。不加这个标注,反例会变成第二套被模仿的风格。
一则正例、最多一则反例。第三则通常只是在重复,或引入一个新的主题供模型抄写。
冲突时改文本,不增加口号
规则说不得新增功能,例子的标题却写着“全面替代人工”。模型模仿标题的概率很高。正确的修改是换一则符合规则的标题,而不是在下面再写“请严格遵守前面的规则,忽略不合适的例子”。后一句话承认例子不合适,却把它留在输入里。
同样,例子若包含一个具体百分比,而规则禁止无来源数字,就删掉百分比,改成“一个材料中的数”。保留百分比会在无关任务里被复用,因为具体的数比抽象的禁令更像“答案”。
发现输出抄了例子,记录是抄了主题、抄了结构还是抄了禁区。抄结构往往说明规则还不够可检查,可以保留例子。抄主题或抄禁区,就缩短例子、换掉实词,而不是把规则再写一遍。
放进 Skill 时一起版本化
规则和例子是约定的一部分。改了例子的夸张程度或删了一条规则,就递增 Skill 的版本,并在变更说明里写那一句。不要只在某次聊天里说“例子看看就好”。聊天不会跟文件走。
验收用一篇与例子主题完全不同的材料跑一次。输出若仍出现例子中的专名或数字,例子就还太像一份真实材料。继续缩短,直到它只剩下形状。怎样把这些句子放进一份可执行的文件,见怎样把一个重复任务写成可复用的 Skill。
一则例子怎样把数字带进无关的稿子
规则写着“不得新增材料以外的百分比”。例子为了说明句式,写了“退货率下降 30%”。下一篇材料只谈支持时间,输出却出现“效率提升 30%”。30 这个数来自例子,不来自材料。模型并没有违反一个它看得见的具体禁令,因为例子比禁令更像答案。
改法是删掉 30,例子改成“一个只在材料中出现过的变化”,并在例前写“例中的主题和数字都不要写入正式输出”。再跑那篇只谈支持时间的材料。若仍出现百分比,就去掉例子,只留规则,直到输出不再发明数字。此后若确实需要演示句式,再把例子加回来,并用一篇无关材料复测。
不要加一句“请勿受到例子影响”就保留 30。那句话和例子同时存在时,例子通常更强。冲突的处理是改掉例子里的事实,不是增加口号。
例子的语言也应和任务分开。任务是中文说明文,例子却是一段英文广告,模型可能把广告的语气带进中文稿,包括原句里的绝对化承诺。例子要么用同一种语言的中性句,要么短到只有结构、没有口号。口号一旦完整,就比规则更容易被整句搬过来。
反例同样不要使用真实客户的名称。真实名称会出现在下一篇无关稿子里,看起来像你们在讨论那个客户。用明显的占位,例如“某产品甲”。并在反例前写明这是错误示范。缺少这句时,反例会成为被模仿的第二套正文。
规则若引用了例子里的句子,就把那句规则改成不依赖例子也能懂的话。例如不要写“不要像上面那样写”,而要写“不要把工作日写成 7 天”。上面那样,在例子被删短或换位之后会失去对象。规则应能单独被检查。例子被拿掉,规则仍应成立。做不到这一点,说明你写的是对例子的评语,不是规则。评语留在修改记录里,不留在给模型的说明里。
给模型的说明里不要写“参考业界最佳实践”这类没有对象的规则。没有对象就无法打勾,模型会用一个常见说法把空缺填上。要参考的做法,写成你们文件里的具体句子,或干脆不写。例子若用来展示“最佳”,也会把某个夸张句式变成标准。标准只来自可检查的规则,不来自一个被称作最佳的例子。
常见问题
只给例子、不写规则,模型能不能自己归纳?
它会模仿例子的表面,包括你没打算传递的主题和夸张程度。没有规则时,你无法指出它违反了哪一条,也就无法稳定地改。
例子是不是越多越清楚?
不是。例子多,模型更可能在例子之间取一个平均写法,或把某个例子的事实带到新任务里。一则正例、必要时一则反例,通常够用。
规则写了“不得夸大”,例子却用了夸张的标题,听谁的?
这种例子在教它夸大。删掉或改成符合规则的例子。不要保留冲突再要求模型自行判断哪一个是认真的。