跳到正文
MIT Technology Review · AI· Arthur Holland Michel·· 3 小时前AI 评分28

我们是否过度信任 AI 说“不”的能力?

We’re putting too much faith in AI’s ability to say no

AI 导读

MIT Technology Review 刊文指出,AI 的拒绝能力正成为安全体系的核心,却并不天然可靠。Anthropic 2021 年提出模型应“有用、诚实、无害”,如今企业通过红队测试和 AI 训练 AI 来强化拒绝,但拒绝机制基于概率,仍可能被绕过。文章警告,拒绝失败可能带来灾难性后果,而拒绝过度则可能被用于压制合法言论。

来源:MIT Technology Review · AI · technologyreview.com