智能体安全标准化研究
概述
智能体是指能够感知环境、理解信息并作出决策与行动的人工智能代理,形态主要包括软智能体和硬智能体。智能体与智能体式的人工智能、具身智能、大模型、机器学习模型、人工智能系统等多个概念存在交叉和差异。
智能体分类与典型应用
智能体可按照产品形态、功能定位与应用场景、智能体数量与协作能力、决策依据、决策过程、所处层次等进行分类。典型应用领域包括金融、工业制造、医疗、教育、网络安全等。
智能体发展现状
智能体的核心技术近年来实现了显著突破,感知能力、规划能力、记忆能力和行为能力均取得长足进步。全球智能体市场快速兴起,产业投资和政策支持力度不断加大。
智能体相关安全政策与标准现状
欧美等国将AI安全上升到国家安全高度,通过立法和监管构建治理体系。我国高度重视AI及智能体安全,构建了多层次治理体系,推动形成多元共治格局。国内外标准化组织均在积极推动智能体安全标准化工作。
智能体安全风险与应对措施
智能体安全风险具有风险在时间和空间维度扩展、风险跨模块传导机制、交互流程复杂多变、群体效应凸显等特点。报告汇总了11条智能体安全风险,并提出了相应的应对措施。
智能体安全标准体系
报告构建了适配智能体安全需求的智能体安全标准体系框架,包括基础共性、安全管理、关键技术、测试评估和产品与应用五个维度。
智能体安全标准工作推进建议
建议构建智能体安全国家标准体系,深化国际标准协同与对接机制,完善标准实施与支撑保障机制。
总结与展望
智能体正经历从“高级工具”到“自主伙伴”的范式转变,其发展呈现技术深度融合、自主性显著增强、社会角色深化三大趋势。我国推动智能体发展,开展智能体安全治理,应注重平衡安全与发展、创新与规范的关系,建立适应智能体特性的新型监管范式,并进行前瞻性布局与深化。