深浅色
把话说清楚不玄学。它是四个具体动作,做对了当场见效。
去餐馆点菜,你会这么说吗
「随便来点吃的。」
服务员不会怪你,但端上来的东西大概率不是你心里想的。跟模型说话就是这样,只不过模型太客气了,它不会说「你能不能说具体点」,它会直接给你一盘你没点的菜,还配一句「希望您喜欢」。
我自己翻车最惨的一次,是让一个工具「分析一下这份用户反馈」。它给了三百字的通稿,四条结论,两条正确,两条是我原文里根本没提的。我盯着屏幕愣了半分钟,才反应过来问题出在哪——我没说给谁看,也没说我要什么形状的东西。
从那以后我养成了一个习惯:先问自己三个问题。给谁看。要什么形状。什么叫做好了。
改法一:先给它一个例子
这是四个改法里最省事的一个,效果通常也最猛。
不要说「写得像人一点」。给它两段你满意的东西,说「照这个调子写」。
2022 年初 Jason Wei 那帮人的论文里提出一个做法:先给模型几个带中间步骤的示范,它自己会学着把中间步骤写出来。思维链(chain of thought)—— 指的就是这个 prompting 做法。他们是在数学题上测的,我把它挪到写文案上,效果一样。
那篇论文最狠的一组数在这儿:只给八个示范,一个 5400 亿参数的模型在小学数学应用题上就超过了专门训练过的 GPT-3。我第一次看到的时候是有点不信的。它说明模型特别会「照着样子的形状」办事,而不太会凭空猜你想要的形状。
改法二:把格式要求写成硬指标
「简洁一点」没用。「不超过 120 个字」「分三条,每条不超过 20 字」「不要出现『全新升级』『颠覆式创新』这类词」——这种才有用。
我自己的习惯是把格式要求放在提示词的最后一行。放最后不是迷信,是因为模型读到你这句话时,前面那些内容刚好是最新的,后面的更容易被记住。
硬指标还有一层好处:它能被检查。你能一眼看出它有没有做到。如果做不到,至少知道该改哪儿。
改法三:一次只问一件事,同一段对话也别混两件事
我见过最亏的用法,是把五件事塞进一次提问:帮我查个资料、顺便改一段话、再帮我列个提纲、最后总结一下。最后出来的东西每一件都只有三分。
拆成四次问,每次给它三十秒,我的时间成本几乎一样,拿到的东西完全不是一个档次。
还有一条更要紧的:别在同一段对话里问两件不同的事。
这一条我踩坑最深,也是这一节里最值钱的一条。
一个对话框是一个连续的上下文。你在第三轮问 A 事情,它会把前面十几轮关于 B 事情的话一起看进去,然后顺着 B 的语气来回答 A。
我曾经在一个写了三千字的对话里,突然问「顺便帮我看下这段代码」。它给我的是一段完全跑偏的东西,还很自信。
新开一个对话,是成本最低的解法。养成这个习惯之后,我的问题解决率明显上去了。
一个中文环境里的坑
英文测试里衡量「听不听话」的常用题库叫指令跟随评测,2023 年 Google 团队做的那版只有英文指令。后来有人把它翻成法语、日语、西班牙语,再测同一批模型,发现同一个模型在不同语言、不同指令类型上的分数差得很远。
对中文使用者来说,翻译是所有任务里最麻烦的一种。所以中文里补一句「用中文回答」不是废话,偶尔真的有用。
延伸阅读
Chain-of-Thought Prompting Elicits Reasoning in Large Language Models(Jason Wei、Xuezhi Wang、Dale Schuurmans et al.,2022,arXiv 预印本)—— 先演示思路再让它做的路子,就是这篇。三个规模不同的模型,只要提示词里塞几个带中间步骤的样例,数学、常识、符号推理的成绩集体上台阶。论文出来之前,这件事一直被认为是必须重新训练才可能做到的。arXiv: 2201.11903
M-IFEval: Multilingual Instruction Following Evaluation(Antoine Dussolle、Andrea Cardeña Díaz、Shota Sato、Peter Devine,2025,arXiv 预印本)—— 拿八个当时的顶级模型,用同一套「能不能照办」的题目分别用英、法、日、西四种语言考一遍。同一道「写一段话,规定用几个要点、不许出现某个词」的题,模型换个语言就换了一副面孔。论文自己的结论是各语言之间的分数差得很厉害,所以只测英文的分数不能代表别的语言。中文不在他们的四门里,这个方向目前还谈不上有定论。arXiv: 2502.04688
动手试试
拿一个你昨天问过、并且不太满意的问题,重新问一遍。这一次加三个东西:两行格式硬指标,一句「这是例子:……」,以及一个明确说不许碰的范围(比如「别给我编数据」)。
同一个工具,同一个问题,五分钟内能比出来。
如果差别不大,那说明你的原问题本来就够清楚;如果差别明显,你就抓到那四个改法里的某一个了。
下一站
问清楚了,它大概率会照办。但还有一种更隐蔽的情况:你说完,它答应了,然后偷偷改了你的意思。