巨人天成
产经 科技 企业 数据 峰会 快讯 商业

360潘剑锋:AI漏洞挖掘促行业升级,智能体安全需驾驭不确定性

2026-06-27来源:快讯编辑:瑞雪

在ISC.AI 2026大会期间,360集团首席科学家、集团高级副总裁潘剑锋发表了关于AI安全治理的深度见解。他指出,AI漏洞挖掘技术已从备受质疑发展到让安全人员感受到压力,这标志着行业正经历加速升级而非面临淘汰危机。针对智能体存在的天然安全短板,他提出需构建"驾驭AI不确定性"的新型治理范式。

传统安全防御体系正遭遇根本性挑战。潘剑锋分析称,计算逻辑的转变是核心动因——过去软件基于确定性计算构建,人类需将复杂世界抽象为机器可理解的规则;而大模型的出现使计算转向不确定性,机器开始具备理解人类意图并适应真实世界的能力。这种转变虽赋予AI处理复杂任务的创造力,却也成为新型安全风险的源头,相同输入可能引发完全不同的推理路径和行动结果。

AI安全风险呈现双重维度特征。外部攻击者可通过隐藏恶意指令于用户输入、系统提示等常规交互中,利用模型对模糊指令的解读能力实施注入攻击。内部则存在模型认知缺陷引发的风险,包括编造虚假信息、时间逻辑错误等幻觉问题,以及多智能体协同工作中错误判断的链式放大效应。这些特性要求安全治理必须从防御已知威胁转向管控不确定性。

360集团提出的三层治理体系构成完整防御闭环。输入层通过恶意意图识别引擎构建"以模治模"的防御机制,依托搜索、安全攻防等领域的独家数据资源,使开源大模型安全性提升10%-30%。推理层采用世界认知模型提供决策锚点,通过理解世界运行规律来约束模型推理过程。执行层则部署环境孪生沙箱技术,对工具调用、数据访问等操作实施动态监控与异常回滚。

对于市场发展趋势,潘剑锋认为智能体安全将成为基础配置,但不会形成单一垄断格局。该领域更可能呈现手机行业般的生态结构,头部企业占据主要市场的同时,垂直领域仍存在大量专业化机会。他特别强调,AI厂商无法取代专业安全公司,安全行业仍需依赖攻防经验与行业知识构建壁垒,但AI技术正在重塑行业准入标准。

变电站智能辅助监控系统:能源场站智能化运维的核心工具与发展现状
目前这类智能化监控类产品的应用场景覆盖十分广泛,除了传统电力领域的变电站、光伏场站、风力电站之外,还可适配轨道交通、高速公路监控、城市道路监控、智慧城市、各行业数据机房、档案室、库房等不同场景的监控管理需求…

2026-06-27

高分子“锁扣”编织新材:太阳能海水淡化提速,淡水直供农业灌溉
中国科学院过程工程研究所与深圳大学联合团队提出一种高分子“锁扣”机制,成功将纳米颗粒编织成三维光热蒸发材料,使太阳能海水蒸发速率大幅提升,并通过户外试验装置,实现了从海水淡化到农业灌溉的初步探索。在连续 30…

2026-06-27

筑牢基建根基 运营商助力具身智能产业驶入商业化“快车道”
同时,持续优化端边云协同技术架构,打通终端感知、边缘计算、云端调度的全链路通道,缩短数据传输与指令响应时延,解决机器人动态控制滞后、集群协同不畅等核心问题,全面适配具身智能设备的网络运行需求,为产业智能化升级…

2026-06-27

计算机安全领域顶尖学者宋晓冬携团队加盟Meta,助力AI安全新发展
本周四,UC Berkeley 计算机教授 Dawn Song(宋晓冬)宣布加入 Meta 超级智能实验室 SuperintelligenceLabs,担任 AI 研究副总裁。 宋晓冬的研究不仅覆盖传统的…

2026-06-27

乐奇Rokid AI眼镜新突破:微信支付一键搞定,AI打车出行更便捷
IT之家 6 月 26 日消息,在今日的 Rokid Open Day 2026 全球生态及开发者大会活动中,乐奇 Rokid宣布与微信合作,全球首发 AI 眼镜的微信扫一扫功能。 用户可以通过佩戴眼镜,看…

2026-06-27