跳到正文
百沐一下百沐一下
本页目录
方法与思维

AI 说得越笃定,越要留个心眼

您把一段结果丢给 AI,想让它判断:这个差异到底能不能说明问题。几秒后它回了一段话,分了三层,先讲机制,再摆证据,末了补一句「当然,这里要考虑样本量的影响」。读起来条理清晰、分寸得当,像一位想得很周全的同行。您点了点头,采纳了。

直到几天后重看,您才发现那段「机制」把两条本不相干的通路悄悄接在了一起:听上去顺理成章,其实是拼出来的。让您差点信了的,不是它有多对,而是它说得有多稳。

这篇不劝您少用 AI。恰恰相反:越是天天用,越要认清一件事——AI 出错的时候,语气和它说对的时候一模一样,有时甚至更笃定。

AI 为什么会自信地错

想明白这件事,得先知道大模型在做什么。它的核心动作是「续写下一段最像样的话」:根据您的问题和海量语料里的规律,一个词一个词地拼出读起来最顺、最像正确答案的文字。它优化的是「像」,不是「真」。

这带来一个反直觉的后果:在它的输出里,对和错没有不同的表情。 人不确定时会迟疑,会在语气里露出犹豫;AI 不会。它不知道自己不知道——没有可靠依据时,它不会停下来,而是接着补上最像答案的那段话,跟它有十足把握时毫无二致。那份笃定只是语言层面的流畅,和内容对不对没有关系。

更要留意它补的那句「需要注意」。您可能觉得,它都主动提示风险了,应该挺靠谱。但那句谨慎的补充,往往也只是「一段可信的回答通常长这样」的一部分,是模板里的一环,并不是它对某处真的心里没底。恰到好处的谨慎,有时反而是让错误答案更像样的包装。

模型确实在进步,有些场景下它会更明确地说自己不确定。但您没法靠语气判断真假——说得稳不稳,和答得对不对,是两件事。

哪些环节最容易被它带偏

不是所有问题都一样危险。查一个函数参数、转换一下数据格式、确认一个术语的译法,这类事对错一眼可验,AI 带不偏您。真正容易出事的,是「听起来对」和「真的对」离得最远的那些环节。它们有个共同点:都依赖您课题里的具体前提,而那恰恰是 AI 最缺的东西。

一是替您下结论。「这个结果说明了……」这类判断,得知道您的实验怎么设计、控制了什么、前提成不成立。AI 只对着一张输出反推,推不出这些背景,于是很容易把一次探索性的观察,讲成一个板上钉钉的结论。数字没错,错的是「这个数字能不能这么用」。

二是因果推断。 日常语言里,因果表达最顺口,「因为……所以……」「X 导致 Y」张口就来。AI 续写时天然偏向这种顺滑的说法,常常不动声色地把一个相关关系,讲成一条因果链。您读着也顺,因为它写得顺;可相关和因果之间那道坎,它并没有替您迈过去。

三是边界与适用范围。 一个方法、一个结论适不适用于您这套具体条件——您的样本类型、前提假设、适用人群——AI 给的往往是通用情形下的标准答案。这答案本身不假,却未必落在您的边界之内。它不知道您的特殊之处,自然也提醒不了您「这里可能不适用」。

怎么守住自己的判断

把 AI 当成一个能干、但需要复核的同事。 它知识面广、手脚快,能替您把活儿铺开;但它交上来的东西,默认都要过您这一关,就像您不会把新同事的初稿直接署上自己的名字发出去。它是助手,不是替您签字的通讯作者。让它负责快和广,您负责真和对。

关键结论,一定回到证据和原文。 越是要写进论文、要拿去下判断的论断,越不能停在「AI 这么说」。让每一条依据都能回溯到原始出处:DOI 能解析、原文段落能点开、数据能对上。这也是为什么带出处、能点回原文的检索式问答在科研里不是花架子——能指回原文的答案,和听起来对的答案,是两码事:前者给您一个可核对的落点,后者只给您一个信或不信的感觉。

越顺,越要停一下。 这条最反直觉,也最管用。当一个回答顺得让您想直接复制,那往往正是该踩刹车的时候,因为「顺」本身就是让您放下警惕的东西。太贴合预期、太严丝合缝的答案,值得多问一句:是它真的对,还是它顺着我的话拼得太好?真实世界很少这么听话。

落到一个能天天用的动作

前面几条,可以收成一个不费力的习惯。采纳任何关键结论之前,先把它翻成一个可核对的问题,问自己一句:「这句话对应哪条我能查的证据?我去哪儿能证伪它?」

答得上来——去查这个库、翻这篇原文、跑这个对照——就去查,查完再用。要是答不上来,说不清这个结论该怎么验证,那基本可以断定:您还没核实它,只是被它的语气说服了。能不能当场答出这一句,就是判断力还在不在场的分水岭。

它不用您少用工具,也不用您对每句话都疑神疑鬼,只在「要下判断」的地方多问这一问。

AI 在科研里最大的风险,从来不是它不够聪明,而是它足够流畅——流畅到让您忘了,那个结论最终要由您来负责。所以让它替您把话说顺,别让它替您把主意拿定。它说得越笃定,越是轮到您留个心眼的时候。

本栏目更多

方法与思维