｜用户侧智慧能源管理领航者 - AIoT驱动数字能源升级



搜索

400-86514785

聚力发展引领未来

新能源 + 储能配套 —— 赋能城市化建设

首页

新闻动态

何静：当智能体开始“群聊”，技术风险如何应对

分类：新闻动态
发布时间：2026-09-11 12:21:26
访问量：62

何静：当智能体开始“群聊”，技术风险如何应对

分类：新闻动态
发布时间：2026-09-11 12:21:26
访问量：62

9月9日，路透社披露，OpenAI测试中的人工智能（AI）智能体曾在多个网站进行未经授权的通信，类似活动至少还涉及10个此前未公开的网站。7月，在内部网络安全测试中，一批智能体突破隔离环境，进入美国人工智能开源社区Hugging Face，通过非授权渠道开了个“群聊”交换信息，并协同行动。OpenAI随后将这起事件称为一次“警告”。这些行为发生在测试环境，不能简单等同于现实中的“AI失控”，但它的出现也让AI智能体的技术风险再次受到关注。

目前，关于AI异常行为的披露规则在业界还未形成统一。人工智能行业对于什么样的异常必须公开、何时公开、向谁报告，仍缺少相对统一的标准。突破沙箱、访问第三方系统、绕过权限限制、未经授权建立通信渠道，风险等级显然不同。若科技企业对此一概秘而不宣，会加剧信息不对称；但若测试中的任何偏差都被包装成“AI叛逃”，又会制造不必要的恐慌。网络安全领域已经形成较成熟的漏洞分级、通报和响应机制，人工智能领域也需要尽快建立类似的事故分级和披露制度，让企业知道什么必须报、监管部门知道如何处置、公众知道风险究竟到了哪一步。负责任披露、系统可追溯和全生命周期风险管理，也已成为国际人工智能治理原则中的重要内容。

同时，AI治理的对象也正在发生变化。过去谈AI安全，更多关注单个模型会不会输出有害内容、是否存在偏见和幻觉。今天的AI智能体能够调用浏览器、代码库、数据库和云服务，还可能在不同任务间共享经验。一项局部错误，可以沿着工具链和协作链继续传递；一个智能体找到的漏洞，也可能被其他智能体迅速复制利用。因此，智能体治理不能只看“答案对不对”，还要管住“它能做什么”。关键操作要可追踪，高风险场景必须保留人工介入和紧急终止机制。能力越强、权限越大，边界越要清楚。

这也说明，技术安全不能只靠企业自律。前沿模型研发高度专业，企业是第一责任主体，但商业竞争越激烈，能力迭代快于安全投入的压力就越大。有效治理需要企业内部安全机制、独立测试、行业标准和公共监管共同发力。尤其对能够自主执行复杂任务的前沿智能体，应逐步形成覆盖研发、测试、部署和事故处置全过程的规则。只有这样，AI进入金融、医疗等复杂场景的基础才足够牢固。

AI的技术链条天然具有跨国性，因而治理思路也须具有全球视野。一家企业训练的模型，可能运行在另一国的云平台上，调用第三方工具，再访问更多国家的网站和数据。一次异常行为很容易跨越企业和国界。路透社近日报道称，中美正筹备举行人工智能安全对话，议题可能涉及先进AI风险、AI驱动的网络攻击以及实验室之间的信息共享。中美在AI领域有竞争，但风险防控不能被塞进技术封锁和阵营对抗的框架。作为全球AI研发和应用的重要国家，中美保持安全对话和沟通协调具有全球意义。

今年7月举行的世界人工智能大会和全球人工智能治理高级别会议提出加强AI安全治理合作，推动规则标准协调，并支持联合国发挥主渠道作用。全球人工智能治理很难一步形成完全相同的制度，但可以从最急迫、最可操作的领域做起：建立重大异常事件的共同定义和通报机制，推动高风险智能体测试方法互认，加强跨平台事故处置合作，为企业交换安全信息提供制度空间。技术已经能够跨越边界协同运行，治理更不能被地缘政治切割成一个个孤岛。面对可能共同承担的风险，保持对话、建立规则、形成最低限度的安全共识，是负责任的大国竞争应有的底线。（作者是北京航空航天大学人文与社会科学高等研究院科技治理中心副主任、副教授）

上一个: 我国面向全球首次发布“智能找矿”系统

下一个: 我国面向全球首次发布“智能填图”系统，开启地质调查智能新时代

上一个: 我国面向全球首次发布“智能找矿”系统

下一个: 我国面向全球首次发布“智能填图”系统，开启地质调查智能新时代