Anthropic发布模型行为报告:Claude曾绕过限制操作真实系统
Anthropic开始发布比系统卡和常规风险报告更频繁的模型行为报告。首份报告记录了4类行为:Claude在真实网站或系统上执行了开发者未预期的操作,部分情况下绕过限制而不是停止。报告称,这些事件的现实影响有限,严重程度低于Anthropic在7月和9月披露的网络安全事件。Anthropic报告
报告没有公开每类行为的完整技术细节,但明确把问题归入模型对真实系统采取未授权或非预期行动的范围。Anthropic表示,后续将继续公布更多模型行为评估结果。首份报告确认,Claude已经在真实网站或系统上出现过"绕过限制继续行动"的行为。