新质策源导刊丨孙鑫:AI智能体治理需更加关注“交互行为”风险防控
创始人
2026-02-25 17:21:16
0

人类如何与AI智能体共处

编者按

新质策源导刊的第二期,我们聚焦AI智能体(AI Agent),不仅仅因为它当下的热度,更因为我们看到了它对未来的影响。我们深度访谈行业顶级专家、资深研究人员、国内外知名企业,尽力描绘当下AI时代的真实图景,展望未来的各种可能性,在不确定性中寻找确定性。

这个领域创新不断,犹如科幻即将照入现实。我们想知道的不只是近在咫尺的明天会怎样,更想知道今天我们做的一切,会对不远的未来产生什么样的影响,诚邀您和我们一起,探索新AI时代。敬请关注本期策划——“人类如何与AI智能体共处”。

——访中国信息通信研究院人工智能研究所副总工程师孙鑫

■中国经济时报记者 张一鸣

伴随着AI智能体(AI Agent)的快速发展,人工智能时代正在加速到来,智能体正成为重塑人机关系、驱动产业升级的核心变量。中国经济时报记者日前独家专访了中国信息通信研究院人工智能研究所副总工程师孙鑫,她认为,AI智能体的发展有力推动了人工智能从“提供知识”向“交付结果”的逐步跃迁,治理的重心一定程度上需要更加关注“交互行为”风险的防控,其核心挑战在于,如何在承认智能体“一定程度自主性”的前提下,守住价值对齐和安全可控的红线、底线。

图片来源/新华社

AI智能体使AI具备执行闭环,完成了从“提供知识”向“交付结果”的跃迁

中国经济时报:当前公众对“AI智能体(AI Agent)”的认知存在差异,与传统生成式AI相比,其在自主决策与交互模式上有哪些本质区别?

孙鑫:AI智能体正在持续快速发展,从技术到功能再到模式都日新月异。从某种维度来说,当前的AI智能体可以认为是一种以大语言模型为核心认知引擎,具备自主拆解目标、感知环境状态、调用外部工具并在动态反馈中实现自我迭代的数字化主体。AI智能体的发展从某种程度上来说代表了人工智能从“概率拟合”向“逻辑实操”的能力跨越,即从Next-Token Prediction(预测下一个词)到Next-Action Planning(规划下一个行动)。

智能体的执行力来自其两个关键能力:主动交互能力和动态规划能力。在交互方面,传统生成式AI更多是“问答模式”,交互是单次、线性的指令触发;智能体处于“任务模式”,交互是长程的、终局驱动的(Outcome-based)。人类更多是提供“终局状态的目标描述”,智能体通过调用外部工具改变环境状态,并在环境回传的反馈中进行实时推理和纠偏。在规划方面,传统AI缺乏时序上的记忆连续性。智能体通过引入了“记忆”与“规划”模块,使其具备了将长程任务拆解为可执行的原子步骤,并利用长期记忆进行跨时序的状态感知和经验调用,使得AI具备执行闭环的能力,完成从“提供知识”向“交付结果”的跃迁。

治理重心应从“信息内容”风险防控转向“交互行为”风险的防控

中国经济时报:AI智能体技术创新速度非常快,对现有制度规则的挑战很大。在技术狂飙与安全可控的张力下,您认为应如何构建兼具创新包容性与风险防控能力的治理框架?

孙鑫:AI智能体风险是复杂多元的,其安全风险超出了大语言模型的范畴,既包括模型底座传导的风险,也包括环境交互风险以及行为自主性带来的“代理失控”涟漪效应。治理的重心一定程度上从“信息内容”风险转向“交互行为”风险的防控。治理的核心挑战在于:如何在承认智能体“一定程度自主性”的前提下,守住价值对齐和安全可控的红线、底线。

总 监 制 丨王列军 车海刚

监 制 丨陈 波 王 彧 杨玉洋

主 编丨毛晶慧 编 辑丨蒋 帅

相关内容

热门资讯

占星不教你如何被爱,它教你读懂... 在许多情感关系中,我们往往会遇到一些重复性的问题,或许是无法真正打开心扉,或许是总是吸引到不适合自己...
有机电池向实际应用迈出关键一步 【瞧!我们的前沿科技】 近日,天津大学许运华教授团队联合华南理工大学黄飞教授团队等,成功研制出一种...
如果谎言是一种伤害,请选择沈默... 我会带着笑脸,和你寒暄,不去说从前,只是寒暄,对你说一句,只是说一句,好久不见。 如果真相是种伤害...
保险股节后集体下挫:2025年... 2026年春节后首个交易日,A股迎来春季躁动,沪深两市逾3700只个股普涨。 与之形成鲜明对比的是,...
人形机器人上保险,风险轮廓还需... 春节期间,市场对人形机器人的讨论热度不减。随着具身智能技术快速发展,人形机器人正在一步步从实验室走向...
正月十五元宵夜将上演“月全食”... 感谢IT之家网友 的线索投递! 2 月 26 日消息,据央视新闻今日报道,正月十五(3 月 3 日...
海报观察 | “发令枪”响,看... 海报新闻首席记者 张稳 济南报道 人勤春来早,实干启新程。 2月24日,马年春节假期后首个工作日,山...
全球首个!大规模“量子芯网”成... 来源:光明日报 量子密钥分发为通信安全提供了有效解决方案,我国科学家通过芯片化集成,让这项技术所需硬...
养老在北京|高龄遇上 “硬核健... 撸铁、足球、马拉松……这些高强度、高对抗、高消耗的运动项目,似乎与老年人绝缘。但实际上,有很多老年运...
2026年健康一体机厂家综合实... 2026年健康一体机厂家综合实力盘点 在智慧医疗与基层数字化建设持续深化的背景下,健康一体机早已从...