来源:互联网 更新时间:2025-04-13 09:35
4月13日消息,LMArena 更新了Meta最新发布的开源大模型Llama-4-Maverick的排名,从此前的第2名,直线掉到了第32名!
这也实锤了此前开发者对Meta为刷榜排名向LMArena提供了“特供版”的Llama 4大模型的质疑。(详情:
4月6日,Meta发布了最新的大模型Llama 4,包含Scout、Maverick和Behemoth三个版本。其中,Llama-4-Maverick在LMArena公布的Chatbot Arena LLM 排行榜中的排名第二,仅次于Gemini 2.5 Pro。
然而,随着开发者实际使用Llama 4大模型开源版的效果陆续曝出,Llama 4口碑急转直下。有开发者发现Meta提供给LMArena的Llama 4版本与提交给社区的开源版本不同,因而Meta被质疑为刷榜作弊。
4月8日,Chatbot Arena官方发文确认了用户的上述质疑,公开表示Meta提供给他们的是“特供版”,并考虑更新排行榜。
根据Chatbot Arena官方消息,Meta首次提交LMArena的Llama-4-Maverick-03-26-Experimental是一个实验性聊天优化版本,当时该版本的排名为第二。修正后的模型为HuggingFace开源版同款Llama-4-Maverick-17B-128E-Instruct,是17B激活参数、128个MoE专家的指令微调模型。
目前,开源版同款Llama-4-Maverick-17B-128E-Instruct在LMArena的排名为32名,远低于Gemini 2.5 Pro(1)、GPT4o(2)、DeepSeek-V3-0324(5)、DeepSeek-R1(7)、Qwen2.5-Max(11),甚至连英伟达基于上一代Llama 3.3改造的Llama-3.3-Nemotron-Super-49B-v1(17)都不如。
LMArena详细排名如下:
ao3官方官网链接入口中文
《伊苏X -诺曼荣光-》加长版预告公开 8月21日发售!
怎么用deepseek生成ppt?deepseek生成ppt教程
如何在iPhone中清理缓存 iPhone系统缓存清理方法介绍
iPhone15 Pro Max屏幕一直亮着是什么原因
Edge浏览器怎么关闭某个进程
百度网盘mkv格式如何播放
qq音乐怎么免费听歌?qq音乐免费听歌教程
传闻称新一代Xbox或将取消对旧款游戏的兼容支持
Claude怎么下载 Claude网页和第三方工具的打开方法
铁路12306怎么改签?铁路12306改签教程
疑似小米YU7 Ultra实车曝光:双风道前舱盖+大面积尾翼
Gemini能同时支持多个语言吗 多语言输入与翻译能力解读
iPhone 17处理器成谜:连分析师都懵了
PotPlayer怎么设置皮肤 PotPlayer界面美化自定义教程
铁路12306怎么核验手机号 铁路12306核验手机号方法
东北持续高温 黑龙江空调线下销售额暴涨800%
魔兽世界虚空汇聚之地任务攻略
魔兽世界塔碧卡任务攻略
光遇7.10免费魔法是什么
手机号码测吉凶
本站所有软件,都由网友上传,如有侵犯你的版权,请发邮件haolingcc@hotmail.com 联系删除。 版权所有 Copyright@2012-2013 haoling.cc