“威廉姆斯博士,我是算法组的李昂。我们在训练一个医疗影像诊断模型时,遇到了样本不平衡的问题。”
“罕见病例的数据太少,模型对常见病识别率很高,但对罕见病的漏诊率接近百分之四十。”
威廉姆斯点了点头:“你们试过数据增强和迁移学习吗?”
李昂回答:“试过,效果有限。我们分析了一下,可能是预训练模型的特征提取层跟医疗影像的分布差异太大,迁移效果不理想。”
坐在后排的资深研究员王博士接话:“我们组在自然语言处理的项目里也遇到过类似问题。”
“后来用了对抗生成网络来合成罕见病例的样本,虽然不是真实数据,但确实能改善模型的泛化能力。”
“李昂,你们可以试试这个方向。”
陆彬一直在认真听,这时插话问了一句:“对抗生成网络生成的样本,你们有没有验证过临床可用性?还是仅限于模型训练阶段?”
王博士回答:“目前只用在训练阶段,还没到临床验证那一步。不过从测试集的表现来看,效果是正向的。”
王洁在笔记本上记录了几笔,抬头问道:“合成数据的比例大概控制在多少?会不会引入新的偏差?”
“我们控制在百分之十五以下,超过这个比例,模型会过度拟合合成数据的分布,反而影响真实数据的表现。”王博士说。
陆彬合上面前的笔记本:“这个问题先记下来,会后你们两组可以私下交流,把方案交叉验证一下。现在讨论下一个问题。”
威廉姆斯博士继续说道:“AI智能研发是一项系统性工程,我们必须保持谦虚谨慎的精神。”
“算法永远替代不了人的大脑,但算法能够提高工作效率。”
“我们的研发方向是使算法更加精准,让消费者发出的指令能够得到更加准确的答案。”
威廉姆斯博士话音落下,研发团队沉默了片刻。
坐在前排的一位女工程师举手:“博士,我是语言模型组的陈雅。”
“我们在优化大语言模型的推理效率时,发现模型参数的压缩和精度损失之间的矛盾很难平衡。”
“压缩到一定程度,推理速度上去了,但回答的准确率明显下降,特别是在多轮对话场景下,上下文一致性会出问题。”