Wink Pings

Qwen3.8-27B 的宣传回答从 22% 降到 0.9%,Hermes 分数没掉

Nous Research 发布 Arete-27B,基于 Qwen3.8-27B 的 Apache 2.0 微调。在 803 条提示的评测中,宣传类回答从 22% 降到 0.9%,Hermes Bench 保持 65.60% 不变。

Nous Research 发布了 Arete-27B,一个基于 Qwen3.8-27B 的 Apache 2.0 微调模型。他们用一套 803 条提示的评测来测“宣传倾向”,结果模型给出宣传式回答的比例从 22% 降到 0.9%。同时,Hermes Bench 分数保持在 65.60%,没有因为这次微调掉分。

这件事有意思的地方在于,微调通常会带来能力损失,尤其是针对某种行为做压制时。Nous 声称这次没有在 Hermes Bench 上看到下降。Hermes Bench 是他们自己的一套评测,65.60% 和原模型持平。

“宣传”这个词本身不好定义。Nous 的评测集有 803 条提示,覆盖什么内容、怎么判定回答属于宣传,原文没有展开。0.9% 和 22% 的对比看起来很直观,但换一套提示或者换一个标注标准,数字可能会变。结果依赖评测设计。

Arete-27B 采用 Apache 2.0 许可,意味着可以商用、修改、再分发。对于需要模型少带倾向性输出的场景,这个微调版本值得看一眼。不过,实际部署前最好用你自己的提示集跑一遍,确认它在你的任务上没出问题。

原文由 Asif Razzaq 发表在 MarkTechPost 上:链接。模型权重和评测细节需要去 Nous Research 的发布页找。

发布时间: 2026-11-08 12:45