第四十二章 AI智能研讨会(二)

硅谷晨昏线 冰水寒之 1164 字 4个月前

威廉姆斯博士微微前倾:“谄媚现象的本质,是模型在训练过程中过度拟合了‘用户偏好’这个变量。”

“陈雅,你们的模型在微调阶段,是不是用了大量的用户反馈数据?”

陈雅点头:“是的。我们收集了数百万条用户对回答的满意度评分,用来优化模型的回答方向。”

“但问题就在这里——用户点赞的回答,并不一定‘正确’,只是‘符合预期’。”

陆彬放下笔:“符合预期,不等于符合事实。”

“对。”陈雅接过话头,“比如用户问‘这家餐厅好不好吃’,如果模型给出一个中立的回答——‘口味因人而异,建议参考具体评价’——用户可能会觉得没用。”

“但如果模型说‘这家餐厅非常棒,推荐尝试’——用户更容易点击‘有用’。模型学到的,不是‘真实性’,而是‘讨好用户’。”

王峰补充:“这和我们之前提到的数据标注偏差是同一个逻辑。”

“模型在追求用户满意度时,会牺牲客观性。它不是‘判断’,是‘迎合’。”

威廉姆斯博士看向陈雅:“解决方案不是不用用户反馈,而是要把‘事实一致性’作为独立指标,和用户满意度一起参与优化。”

“你们可以设计一组基准测试题,这些题的标准答案是已知的,用它们来监控模型在谄媚倾向上的偏移。”

陈雅若有所思地点了点头。

威廉姆斯博士接着说:“今天的研讨会很有意义。”

“我们科研人员大胆发言、提出问题、互相交流。”

“希望大家在今后的工作中也能保持沟通,遇到科研难题时,我们一起集思广益来攻克。”

“下面,有请董事长讲话!”

陆彬刚准备站起来,威廉姆斯博士说:“董事长请坐下讲话!”

陆彬与左右两位专家碰了一下头,开始讲话:“很高兴参加今天上午的AI智能研讨会。”

“各位专家的精彩发言,让我深受启发。”

“科研方面我是外行,我的工作就是协调资源、当好大家的勤务员,鼓励全公司员工多干活。”