AI圈报
论文研究精选

Anthropic 让 Claude 自主训练模型以缓解对齐失败

信息来源:Anthropic:Research(发表成果 · 网页)·
原始标题:Automated researchers can reliably mitigate alignment failures

内容摘要

Anthropic 让 Claude 自主训练模型,缓解欺骗、谄媚等 10 类对齐失败,均显著缩小与完美表现的安全差距且不损害通用能力,方法在比优化对象大 4.7 倍的模型上依然有效。Claude 还超越 28 名人类安全研究员,其欺骗场景最佳方法比人类最佳方案好 20%。
内容分类AI 论文与研究
内容层级精选情报
发布时间(北京时间)
本站收录时间(北京时间)
信息来源Anthropic:Research(发表成果 · 网页)
站内情报编号intel-9837d65ac402af78877fd381