从内部检测有害内容:利用模型内部表示
深度2026年4月28日26 分钟阅读
最有趣的发现是:大语言模型内部层包含丰富的安全相关信息,SIREN无需修改原模型即可高效利用这些信息,性能远超依赖最终层表示的现有方法。适合大模型安全研究人员、AI内容审核从业者阅读。
觉得有用?分享给更多人
觉得有用?分享给更多人
Parameter Labs 披露了针对 ChatGPT HTML 预览(原 Canvas)的漏洞利用链:通过 MathLive 库的虚拟键盘和 postMessage 绕过沙箱,利用 YouTube oEmbed 执行 JavaScript,最终可窃取用户数据。OpenAI 修复漏洞并支付 5000 美元赏金。
Docusign 的合同 AI 引擎 Iris 通过组合智能抽取、语义搜索、智能体层和业务规则,补足通用大模型缺失的上下文。文章将上下文分为四类,解释了跨合同关联、企业内部审批规则以及人机协同边界的重要性,并列举了采购经理查询到期软件合同的实际场景。