Meta回应大模型Llama 4训练作弊争议

Meta公司刚刚发布Llama 4 Scout与Llama 4 Maverick,但随后就被曝出模型训练测试集作弊。

在海外留学求职交流论坛“一亩三分地”上,发帖人自称是参与Llama 4训练的内部员工,他表示,Llama 4的内部模型性能始终无法达到开源SOTA(State-of-the-Art,顶尖水平)基准,公司领导层提出在训练后期将各种基准测试的“测试集”数据混入训练或微调数据中,以交出一份“好看”的成绩单。

知名科技媒体TechCrunch也发文质疑Llama 4的性能测试存在误导性。

针对舆论,4月8日凌晨,Meta AI部门副总裁Ahmad Al-Dahle发文回应表示,Llama 4一准备好就发布了,所以,不同服务中模型质量难免会有差异,Meta很快会修复这些漏洞提升性能,同时否认在测试集上进行了预训练。

特别声明:[Meta回应大模型Llama 4训练作弊争议] 该文观点仅代表作者本人,今日霍州系信息发布平台,霍州网仅提供信息存储空间服务。

猜你喜欢

她是王思聪前女友,如今34岁身材一流,嫩到出水,娶到幸福一生(王思聪带前女友)

命运的转折,发生在2014年秋的一次聚会。2015年,《栀子花开》里她清纯亮相;2016年,《亲爱的,公主病》让她赢得了更多认可,也在此邂逅了新的爱情。但缘分有时终有尽,2019年,她在『社交平台』平静地为这段…

她是王思聪前女友,如今34岁身材一流,嫩到出水,娶到幸福一生(王思聪带前女友)

聚焦涉密信息安全,源畅科技打造合规化集成服务标杆(公安涉密信息)

涉密信息系统的建设与运维,是对企业技术实力与保密能力的双重考验。重庆源畅科技有限公司凭借涉密信息系统集成资质与ISO27001信息安全管理体系认证,成为重庆地区少数能承接涉密项目的科技企业,为涉密单位打造…

聚焦涉密信息安全,源畅科技打造合规化集成服务标杆(公安涉密信息)

寻秦记电影版来袭,这款三国游戏更懂经典魅力(《寻秦记》电影版预告)

三国:谋定天下》早把这份心思融进了骨血里:关羽吕布是熟悉的三国名将,奇佐天工是新鲜的策略职业;自动铺路是新手的贴心指南,自由置换武将等级是老玩家的创新空间,经典与新意的碰撞,在沙盘上开出了更热闹的花。这些设…

寻秦记电影版来袭,这款三国游戏更懂经典魅力(《<strong>寻秦记</strong>》电影版预告)

模温机老板最忽略的成本,其实是“调功器造成的暗损”(模温机使用说明)

功率输出不满、耗电上涨、温度波动导致客户产品不良、机器寿命缩短、电费变多却不知道原因,这些都是“调功器输出效率差”导致的。我们去测:调功器效率低、波形畸变导致电能损耗、同样的功率输出却更耗电 三、原因分析…

模温机老板最忽略的成本,其实是“调功器造成的暗损”(模温机使用说明)

贵阳太阳能路灯维修(贵州太阳能路灯招标)

随着使用时间的推移,太阳能路灯难免会出现各种故障,影响正常照明。 太阳能路灯系统主要由太阳能电池板、控制器、蓄电池和LED光源等部分组成。创阳照明集研发、生产、销售、服务于一体,通过ISO9001、ISO14…

贵阳太阳能路灯维修(贵州太阳能路灯招标)