深大、港科大提出 ECA,让 Agent 行动前先验证证据
21 小时前
深圳大学和香港科技大学研究者提出 ECA(Evidence-Carrying Multimodal Agents),针对 AI Agent 因幻觉产生错误前提进而引发错误执行的问题,构建模型提动作、独立验证器出证据、门控程序核条件的架构,通过多通道证据交叉核验拦截伪装攻击。测试显示,该架构能有效拦下不安全动作,正常任务完成表现良好,且日常使用中多数正常操作可直接放行,耗时可控,减少用户事后补救麻烦。
当 AI 幻觉开始操作电脑:深大、港科大提出 ECA,让 Agent 行动前先验证证据
机器之心/投资界/腾讯网/maomu.com
体验专业版特色功能,拓展更丰富、更全面的相关内容。