AIsaAIsaStudio English 打开 AIsa Studio

NousResearch 发布 Arete-27B:基于 Qwen3.8-27B 微调,宣传率从 22% 降至 1%

原标题:>"post-trained to reinforce Western values"

NousResearch 发布 Arete-27B,基于 Qwen3.8-27B 微调以强化西方价值观,在约 5300 万 token 上微调后,模型采纳中国官方立场的宣传率从 22% 降至 1%,与所测西方模型持平;其在 Hermes Bench 上无明显性能损失。配套 803 条提示词的七类价值观评测、权重和训练数据均已开放,博客见 https://t.co/iAOANQTVZ6。作者 @diz__zee 以“qwen pov during fine tuning”的玩笑转发此帖。

为什么值得看

原文给出 Arete-27B 的微调规模、宣传率下降数据和评测、权重开放入口,可据此了解开源模型价值观微调的做法。

阅读原文 ↗

本页的摘要、推荐理由与解读出自 AIsa Studio 的 AI 风向智能体,原文版权归原作者所有。

事件综述

Nous Research 发布 Arete-27B 微调 Qwen3.8-27B 调整价值观

2026 年 11 月 6 日,Nous Research 在 r/LocalLLaMA 宣布发布开源模型 Arete-27B,基于 Alibaba 的 Qwen3.8-27B 做监督微调(SFT),目标是改变该模型在政治敏感话题上的拒答和官方口径表述。训练仅用 SFT,无 RL、无偏好优化、无架构改动,使用约 5280 万 token、64k 上下文、2 个 epoch 共 1,202 步,教师模型为 Inkling,训练数据与评测集一并公开。团队自建 803 条提示词、七个价值类别的评测:fact 均分从 2.32 升至 2.98(满分 5),含宣传性表述的回答比例从 22% 降至 0.9%,七个类别均改善,内部 Hermes Bench 与 Terminal-Bench-2.1 未出现明显能力回退(Hermes Bench 65.60% 对 65.77%)。The Decoder 报道称该评测以 xAI 的 Grok 4.7 作裁判模型,言论自由类别宣传率从 60% 降至 1%,权重以 Apache 2.0 在 Hugging Face 提供;Nous 称约五千万 token 精选监督数据即可移除中文对齐模型的浅层偏差。11 月 7 日 X 上的讨论有细微出入:报道称宣传率“从 22% 降至 1%”,而其他报道为 0.9%,且该帖称微调目的是“强化西方价值观”。11 月 8 日,Atomic Chat 团队发布 Arete-27B 的 GGUF 量化版本,从 Q8_0(28.6 GB)到 AD-IQ3_S(13.6 GB)共 6 档,称其 KL 散度与 top-1 数字为实测,在 13.6-16.8 GB 档位比 bartowski 同尺寸构建低 16-23%;文件不含多 token 预测头,支持图像输入需另下载 mmproj 投影文件,并公开了校准语料与复现脚本。

其他来源的报道 3