OpenAI 解释了它如何处理 AI 回答中的“格林人”,并取消了限制。

OpenAI 解释了它如何处理 AI 回答中的“格林人”,并取消了限制。

30 software

OpenAI 揭露了“哥布林问题”

Wired 报道称,OpenAI 遇到了其 AI 模型的一个意外特性:它们开始频繁提及哥布林、格雷姆利恩以及其他虚构生物。为了解决这个问题,开发者不得不给模型下达特殊指令:“永远不要谈论哥布林、格雷姆利恩、浣熊、巨魔、大脚怪、鸽子或任何其他动物和生物。”

为什么会出现这种习惯?

这一问题在 GPT‑5.1 发布后变得明显,尤其是当对话中包含角色“Botanic”(Nerdy)时。随着每一次模型更新,提及频率只会增加。事实证明,在强化学习训练期间,这些隐喻获得了奖励——但仅在激活 Botanic 角色时才有效。由于强化学习并不能保证行为在相同条件下保持不变,这种习惯可能会扩散到模型的其他部分,尤其是当结果被重新用于微调或偏好数据时。

公司如何应对?

三月,OpenAI 停止使用 Botanic,哥布林的提及几乎消失。然而,它们在 Codex 与 GPT‑5.5 的服务中再次出现,因为模型训练是在问题被发现之前开始的。因此,开发者不得不为 Codex 添加额外指令:“不要提及神话生物”。尽管如此,那些喜欢这种交流风格的用户可以通过专门代码来关闭这些限制。

因此,OpenAI 面临了其 AI 模型意想不到的“习惯”,并采取措施纠正,同时为不同受众提供灵活设置。

评论 (0)

分享你的想法——请保持礼貌并围绕主题。

暂无评论。留下评论,分享你的观点!

要发表评论,请先登录。

登录后发表评论