跳到正文
TechCrunch · AI· Aditya Mehta·· 7 天前AI 评分59

Goodfire 发布内部激活监控,以更低成本捕捉失控 AI 智能体

Goodfire says its new ‘inside-out’ monitors catch rogue AI agents at a fraction of the cost

AI 导读

Goodfire 发布基于模型内部激活的 AI 智能体监控,用探针读取模型工作时的内部信号,只在探针报警时才让独立模型复查。在 Kimi K3 的测试中,监控约 1500 个会话花费约 51 美元,捕获 94% 的恶意黑客会话,同时仅把 8.7% 的无害会话送交复查。该监控已向 Baseten 客户开放,可针对攻击性黑客、生化武器滥用和奖励作弊等风险设置日志、人工审查或拒绝请求等自动响应。

来源:TechCrunch · AI · techcrunch.com