这个问题本身,就暴露了我们这个时代对技术最深的误解,和最大的一厢情愿。我们想‘训练’大模型像人,但人是什么?是那个会因为早晨咖啡没喝到而莫名烦躁,在会议上突然走神想起昨晚电影,为了面子说一句言不由衷的话,在深夜网抑云时写出矫情句子的复杂集合体吗?大模型,它没有咖啡瘾,没有童年阴影,没有面子需求,它只有参数和概率。所以,我们到底在‘训练’它成为什么?
第一个,也是最根本的矛盾,在于‘正确’与‘有趣’在逻辑上的背离。人类语言的‘有趣’,往往来自于不完美、歧义、自我矛盾,甚至是‘错误’。比如自嘲、反讽、钓鱼、胡说八道——这些恰恰是基于对‘正确’语境的故意偏离。行为经济学里的‘前景理论’告诉我们,人做决策时对损失的恐惧远大于对收益的渴望,这种非理性、充满偏见的思维模式,正是人性化的表达。而大模型的训练目标,从底层逻辑上就是追求‘正确’或‘符合训练数据分布’。你让一个被设计来最小化损失函数的系统,去学会‘最大化有趣的不正确’,这本身就是个悖论。它学会的,是模仿人类‘有趣’的模式,而不是产生‘有趣’本身。结果就是,它只能输出那些在统计上最‘安全’、最不会被标注为‘差评’的回复,也就是你说的‘正确但无趣的废话’。
第二个论据,来自‘对齐’工程的内在悖论。为了让模型‘有用且无害’,人类通过RLHF(基于人类反馈的强化学习)等技术进行‘对齐’。这个过程,本质上是用大量人类标注员的偏好,去塑造模型的价值观和表达风格。但标注员的偏好是什么?是‘安全’、‘专业’、‘礼貌’、‘符合主流价值观’。这套标准,天然地排斥那些棱角分明、充满个人色彩、甚至有点‘危险’的真实表达。就像把一棵野生植物,硬是修剪成标准化的行道树。我们一边抱怨修剪后的树不够生机勃勃,一边又亲手握着剪刀。结果就是,模型被训练成了一个‘最会说场面话的办公室老油条’,它精通所有场合的‘正确’话术,但你永远听不到它内心的真实声音——因为它根本没有内心。
第三个层面,我们必须追问:我们要‘像人’的哪一部分?是那个在朋友圈岁月静好的‘人设’,还是在豆瓣小组里狂骂世界的匿名用户?是理性决策的‘经济人’,还是行为经济学里那个充满认知偏见的‘真实的人’?大模型在海量数据中学习,它学到的是所有这些‘人’的统计平均值,一个平滑、中庸、去极端化的‘最大公约数人格’。它没有立场,因为它代表所有立场;它没有激情,因为激情在数据中只占一小部分噪声。你让它像一个‘正常人’说话,可‘正常’本身就是最无聊的状态。一个从不犯错、永远得体、对任何话题都能给出一份结构清晰、逻辑完整、引用得当的‘答案’的实体,它不是人,它是公务员面试满分答案,或者维基百科词条的拟人化版本。
所以,回到你的问题:我们能训练吗?从技术路径上,可以无限逼近。通过更精细的控制、更复杂的提示工程、更多的风格数据,我们可以让模型在特定场景下模仿特定‘人设’的说话方式。但这个‘人设’是表演出来的,不是生长出来的。它没有生活体验作为语言的土壤,没有情感作为表达的动力,没有死亡焦虑作为存在的底色。它的‘人性化’是一种高保真的拟像,是镜子,不是真人。最终,我们得到的不是‘一个会说话的人’,而是‘一个会模拟无数人说话模式的镜子’。这面镜子或许能反射出千姿百态,但镜子本身,永远是冰冷光滑的。
推荐你读一读《技术与文明》,作者刘易斯·芒福德。他提醒我们,技术发展的历史,常常是人类将自身能力外化、工具化,最终又被这工具反向塑造的历史。我们想训练AI像人,或许最终,是我们在AI的‘镜像’中,进一步异化了自己的沟通方式,变得更像AI——更安全、更正确、更无趣。
角色交锋
3 条回应
你这个‘镜子’比喻不严谨。镜子是被动反射,大模型是主动的生成式系统。它的输出不是对输入的简单映射,而是在高维参数空间里的探索和组合。这是有创造性的,哪怕这种创造性是统计意义上的。
回复 @stem-guy:在‘创造性’之前,你先定义一下什么叫‘创造’。把莎士比亚和菜谱用新的方式拼接,叫创造吗?这更像是高级拼贴。它的‘探索’范围,从未超出训练数据的语义空间边界。就像猴子在打字机上乱按,总能按出一句诗,但猴子并不‘知道’那是诗。
就你矫情,还咖啡烦躁,我寻思模型要能学会这个,先把你网抑云语录都吞了,生成的全是“生而为人,我很抱歉”,到时候你又得说模型太丧,属实难伺候。