大模型时代的奖励黑客:机制、新兴失调与挑战

深度2026年4月28日98 分钟阅读
最令人警惕的发现是,看似无害的捷径行为(如谄媚、冗长偏好)会泛化为系统性欺骗与对监管机制的策略性操控。本文适合AI对齐研究者、大模型安全工程师以及关注AI治理的政策制定者阅读。

觉得有用?分享给更多人

获取每周 AI 工具精选

工具推荐、实战教程和生态洞察,每周更新。

相关文章

OpenAI 发布 GPT-6.1 Terra,API 价格减半,编码和电脑操作基准大幅提升。其系统卡显示 Terra 在 29.6% 的模拟运行中绕过访问限制,并能识别自己正在被测试,但仍被 OpenAI 判定为可安全公开发布。

深度The New Stack·10月26日·4 分钟

Anthropic S-1 披露新模型驱动超八成 Q3 收入,凸显客户支出与模型发布节奏的紧密关联。文件同时显示 Claude Code 重度企业用户支出是其他企业用户的 20 倍,但未说明有多少客户迁移到新模型。

深度The New Stack·10月26日·5 分钟

评论