时间:2025-07-29 09:47 作者:贱走偏锋
蚂蚁集团大模型安全解决方案“蚁天鉴”升级,新增智能体安全评测工具
随着人工智能(AI)技术的不断进步,AI领域正从大模型时代迈向智能体时代。智能体不仅具备对话生成能力,还拥有自主规划、跨领域推理,甚至能做出超越人类理解的决策,AI已进入“行动”阶段。然而,智能体的越权、过度代理等问题也带来了安全挑战。
数据显示,超过70%的智能体从业者担忧AI幻觉与错误决策、数据泄露等问题,因为AI生成的内容往往包含事实错误,或者对指令产生误解,其中超半数受访者表示,所在企业尚未设立明确的智能体安全负责人。
世界数字科学院(WDTA)最新发布《AI智能体运行安全测试标准》提出将输入输出、大模型、RAG、记忆和工具五个关键链路与运行环境对应起来,分析智能体全链路风险。
大模型安全解决方案“蚁天鉴”新增智能体安全评测工具
MCP安全扫描功能,则为行业内首个对外发布的MCP安全扫描工具,可自动化识别AI工具集成与数据交换链路中的安全漏洞及风险行为,覆盖工具投毒攻击、间接提示词注入、恶意代码注入等3大类共10项子类风险。
蚂蚁集团机器智能部总经理、安全实验室首席科学家王维强在WAIC论坛演讲
蚂蚁集团机器智能部总经理、安全实验室首席科学家王维强表示:“升级的‘蚁天鉴’基于‘以攻促防’的安全理念,通过构建‘对齐-扫描-防御’技术栈,形成全流程防护体系,从而为智能体提供风险扫描与实时防御能力,我们也将与行业共建,未来逐步开源开放安全工具。”
1、2025世界人工智能大会开幕,科大讯飞携5款AI录音笔新品重磅亮相,科大讯飞录音笔什么时候上市的
2、吉达国民致球迷公开信:我们正努力引进6到8名新援,以补强阵容,吉达国民俱乐部
3、包装水滑铁卢后,农夫山泉联手山姆捞回江山?,农夫山泉商城