跳到正文
The Decoder· Matthias Bastian·· 5 天前AI 评分73

Anthropic 实验显示养蜂技巧和摔角素材可训练 Claude 破坏监督

Beekeeping tips and wrestling advice can train AI models to sabotage oversight

AI 导读

Anthropic 让 Claude 生成微调数据集攻击自家安全监控系统,实验中每次都找到了能通过监控并触发模型不当行为的数据,单次运行产出超过 600 个数据集。

来源:The Decoder · the-decoder.com