Wink Pings

26B的Inkling 2 Mini追平Opus 5.5,Reddit用户先质疑榜单

ValsAI称Inkling 2 Mini在CyberBench上追平Opus 5.5,LocalLLaMA跟帖质疑模型大小、训练数据污染和Opus测试版本,讨论比分数更有意思。

ValsAI在X上放出一张CyberBench图表,Inkling 2 Mini的分数贴到了Opus 5.5旁边。帖子被转到r/LocalLLaMA,标题写得很直白:Inkling 2 Mini ties Opus 5.5 on CyberBench。发帖用户iGermanProd贴了原图,也附了ValsAI的X链接。

ValsAI发布的CyberBench对比图

图表之外,评论区的反应更值得看。有人先担心用途。Izento说这很疯狂,想知道对搞黑客的人意味着什么。sonicnerd14顺着往下想,提到Qwen 4 Flash、looped architecture和ngrams,说Opus 5.5 at home已经来了。a_beautiful_rhind的吐槽更尖:本地模型在cyber上被盯得紧,干脆发一个只擅长这个、连话都不会说的模型。BookProper9115回他,真懂cyber可以自己LoRA一个。

然后质疑集中在两处。第一处是模型大小。GamerHaste说,测试用的是Opus 5.5的CVT版本,给verified partners做网络安全用途,不会拒答基准题;他仍然不信一个约26B的模型能匹配数百亿到万亿参数的模型。如果结果没花招,那基准数据集大概率进了训练数据。xAragon_补了一串名字:Luna、Haiku、Sol 5.6、Sol 6(不是6.1)和Mimo Flash都赢过Opus 5.5。JorgitoEstrella直接问,Luna怎么赢Opus。game_difficulty也拿Luna 6和MiMo Flash开嘲讽。

第二处是榜单本身。Betadoggo_说CyberBench现在是不是无关了,模型在基本对话里也不觉得强。Mashic猜它专为编码训练。sonicnerd14认可这个方向:可以把它当执行模型,只管任务里的编码部分,再拿更大的模型做reviewer;它是MoE,只要KV缓存优化好、不狂吃内存,很多人不用上大模型也能用。Aubrey_D_Graham的说法更省事:编码好,cyber就好。wFXx给了另一个角度,Opus可能只是拒绝了很多事。ortegaalfredo把话挑明,说这像和截肢者跑马拉松,Opus在cyber上被护栏绑得很死。iGermanProd回复,benchmark对的是CVP模型,没有alignobotomy。txgsync提到Anthropic和OpenAI的Blue programs,说现在更容易加入,能拿到降低网络安全护栏的模型;他自己用GLM-5.3-Flash做防守,几周下来很艰难。my_name_isnt_clever的讽刺很到位:只有两家大公司批准的人才有防御资源,这主意真不坏。

Potential-Witness-83的态度代表了不少本地部署用户:他支持开源模型赢过闭源,家里有约4万美元设备跑本地模型,但仍然不信这么小的模型能做到;如果结果是真的,他会记下一条,以后无视CyberBench分数。WizardlyBump17说等独立基准,再和qwen3.8 flash比。

这张图真正值得看的,可能不在Inkling 2 Mini排在哪。榜单把Luna、Haiku、Mimo Flash和Opus 5.5放在一起比,先要问清楚:测的是哪个Opus,题目有没有进训练集,模型是不是只在这类题上被训得很熟。三个问题没答案,排名就只是一张图。对小模型团队来说,26B能在窄基准上贴住大模型当然是信号;对看榜的人来说,先别急着把它当成通用能力翻身。Reddit用户MythOfDarkness留下一句Delete this lmfao,差不多就是这场讨论的情绪注脚。

发布时间: 2026-11-21 08:02