什么是智能体技能?

智能体技能属于模块化、可复用的指令集合,使智能体能够使用预先定义的工具、工作流和 API 执行各类专业任务。 任务范围涵盖数据检索、路由优化、代码生成等。

智能体技能如何工作?

自主智能体具备推理、规划和响应处理的能力,但想要在各类专业 AI 领域中稳定可靠地完成执行动作,就必须依托对应的智能体技能。 智能体技能确切定义了智能体应该如何处理特定任务:使用哪些工具、遵循哪些步骤以及需要遵守哪些约束条件。

智能体技能通常打包为结构化文本文件。 agentskills.io 开放规范定义了 SKILL.md 格式,该格式具备可移植性、易人工阅读的特性,文件包含以下内容:

  • 功能说明:阐述该技能的作用,以及智能体应当触发该技能的适合场景
  • 工作流指令:智能体遵循的分步操作、工具调用或 API 交互

技能可搭配配套说明文档 (例如技能卡),文档中会注明归属负责人、已知风险、功能限制,以及所有已完成的审核与核验相关信息。

当用户或编排系统分配任务时,智能体会将该任务匹配至可用技能,并依照预设工作流执行操作。技能是独立且可移植的,因此同一文件可在各类 AI 编码助手、多智能体框架和企业平台运行使用。这消除了重复开发的问题并简化了维护。

然后,技能通过注册表和目录 (例如 GitHub NVIDIA/skillsSkills.shClawHubHugging Face) 分发,团队可在这些平台完成技能的检索、安装、版本控制和安全审计工作。这套机制以管理软件程序库同等严苛的标准,管控智能体的各项能力。最后,根据基准测试任务评估技能,以此确认这些技能能够优化智能体在目标任务下的运行表现。

黄仁勋解释了智能体的搭建架构:以模型为大脑,调度框架为躯体,工具和技能负责实际执行动作,运行时则如同工坊,统筹所有组件并使其协同运转成一套完整体系。

NVIDIA 验证的技能均附带独立签名,使用者可在安装前核验文件归属方身份和完整性。

为什么经过验证的智能体技能对于 AI 至关重要?

企业级 AI 部署必须满足可审计性、可复现性与治理管控要求。智能体技能提供了一套结构化、文档化的方案用以扩展智能体能力,能够清晰标注每项能力的作用、来源以及合规达标情况,为安全、规范地大规模部署智能体打下坚实基础。

图 1. 智能体技能如何获得 NVIDIA 验证

如何在执行之前验证智能体技能

观看与专家一起举行的实战会议,讨论智能体技能验证,以及在技能进入工作流之前需要注意的事项。

智能体技能的应用与用例

无论是在何处,只要 AI 智能体需要执行可重复的专业工作,智能体技能可应用于各种业务工作流和行业。

软件工程

开发者智能体使用技能正确访问特定框架、库和平台 API。 一项技能可教会智能体如何调用加速计算库、使用企业服务进行身份验证,或遵循已定义的代码审查协议。

生命科学

用于生命科学任务的智能体可调用的技能包括蛋白质结构预测、分子对接、生成化学、基因组分析、蛋白质设计和生物标志物发现。

物流和供应链

路径规划、调度排程和优化类技能,能够依托结构化的智能自主决策体系替代人工流程,协助智能体处理车队排班、资源分配等复杂的配送依赖问题。

视频 AI 智能体

视频 AI 智能体依托各类技能执行标准化可复用工作流,例如自动抓取事件信息、推送告警通知、生成分析报表以及管理视频数据流。借助这些技能,智能体可将实时视频与录像文件转化为可供检索、具备落地指导价值的情报数据。

智能体优化

智能体的训练与微调工作包含启动实验任务、评估输出结果,并基于对齐目标持续迭代优化。基于 NVIDIA NeMo RL 构建的技能将这些工作流转化为单个可调用的指令:智能体能够使用 SFT、DPO 和 GRPO 发布、监控和迭代强化学习实验,无需在每一步手动设置。

数字健康

临床 AI 智能体使用语音技能截取口头问诊、实时转录对话,并生成结构化的临床笔记。

场景神经重建

NVIDIA Omniverse™ NuRec 可将真实场景的摄像头和激光雷达传感器数据转换为逼真的 3D 高斯泼溅场景,用于闭环仿真。智能体可调用的技能将场景重建、伪影修复、资产提取和数据集访问作为单个可调用的指令处理。

智能体技能具备哪些优势?

为了在更多用例中扩展智能体部署,专用技能允许每个智能体精确适合其领域,而无需增长其核心指令集或造成维护复杂性。

跨工作流复用能力

一项技能只需完成一次开发,便可在多款智能体、工具及运行环境中直接复用,无需重复开发,能够有效降低为 AI 智能体拓展新功能所需的成本与周期。

互操作性

技能根据开放的规范构建,可兼容各类编程助手、开发框架和企业级平台。 无需针对单个智能体重写,同时不存在厂商锁定问题。

透明度和治理

智能体技能可为企业团队提供等同于软件依赖项级别的可审计能力:信息透明可查、来源标识明确、统一纳管。

加快价值实现

预构建、验证的技能使团队能够立即扩展其智能体,无需定制的开发周期,加速从概念到工作智能体部署的路径。

挑战和解决方案

验证技能真实性

对技能进行身份验证并将验证措施构建到智能体工作流中,是防止安全风险的密钥步骤。

解决方案

  • 部署前对各项技能开展安全扫描,排查提示注入、权限过度授予以及供应链相关漏洞风险。
  • 强制采用加密签名机制,用以校验文件真实性,并识别发布后遭到篡改的行为。
  • 查看技能配套文档,确认其中已列明依赖组件、访问权限要求以及已知缺陷与局限。

管控技能无序扩张

随着技能使用的扩展,需要对访问和更新这些技能的方式进行管理和标准化。

解决方案

  • 使用具有版本控制、搜索和访问控制的集中式技能目录。
  • 采用标准化技能格式,简化清单和更新。
  • 定义治理策略,指定哪些技能适用于哪些环境。

评估技能质量

评估工作流输出将需要更详细的检查,并行运行多种技能。

解决方案

  • 在发布之前,需要进行质量评估,涵盖触发模型精度、任务完成率和 token 效率。
  • 在技能元数据中清晰记录已知限制,便于开发者合理设定部署预期。
  • 线上 A/B 对照核验技能效果,以无技能基线数据测算真实提升。

可用的智能体技能类型

NVIDIA 发布了针对 NVIDIA CUDA-X™ 库、AI Blueprint 和平台工具的经过验证的智能体技能目录,旨在为开发者提供可信、即用的能力,利用 NVIDIA 加速计算扩展智能体。经由 NVIDIA 认证的技能在发布前均会完成安全风险扫描,通过加密签名核验真伪,并配套技能卡片,记录权属信息、依赖组件以及验证状态。

智能体技术或领域 它的作用 可用技术
智能体专业化和优化 利用 NVIDIA NeMo 开放库,实现合成数据生成和数据管理、评估、定制和安全的智能体技能。 NeMo PlatformNeMo EvaluatorNeMo Data Designer
语音赋能  用于构建语音支持的智能体工作流的智能体技能,包括实时转录、多语言翻译和文本转语音合成。 有了这些技能,智能体就能听得懂、说得出、还能实时翻译,把语音变成了管线里的核心数据交流通道。 Nemotron 语音技能
信息检索 面向开发者提供智能体技能套件,用于搭建并优化企业级智能体的检索工作流,包括创建可搜索的索引、检索相关上下文,以及对嵌入和重排序模型进行微调,以获得更准确、依据更充分的应答内容。

NVIDIA NeMo Retriever 技能
面向企业的智能体智能 面向开发者打造的智能体技能,支持企业级智能体快速进行内部知识推理,并安全接入合规授权工具与数据源,无需重构现有工作流。 NVIDIA AI-Q Blueprint 技能
决策优化 用于将复杂的车辆路由、调度和数值优化问题转化为结构化数学参数和公式的智能体技能,提供加速的决策智能。 NVIDIA cuOpt 技能
视频 AI 智能体 对于视频智能和自动化视觉检查,智能体技能可协助团队生成合成训练数据、微调视觉模型,同时搭建并运维视频 AI 智能体,对实时视频与存档录像完成检索、摘要提炼及内容分析工作。 NVIDIA Metropolis VSS 技能
NVIDIA 物理 AI 数据工厂
NVIDIA TAO 视觉模型微调
NVIDIA DeepStream
机器人仿真和工作流编排 用于构建和扩展机器人仿真工作流的智能体技能,从虚拟环境重建、机器人操控、物理与传感器仿真、合成训练数据生成、任务负载编排,以及在部署前的结果核验工作。
所有 NVIDIA Isaac Sim™ Skills
PAI 视频增强缺陷
图像生成
设置用于合成数据生成传感器
仿真和视频渲染的基础设施
Isaac 移动性技能
利用 Osmo 神经重建大规模编排机器人
开发工作流
AI 安全护栏 这类智能体技能用于为 AI 应用与智能体工作流增设安全管控能力,帮助开发者创建安全护栏,将自然语言描述的安全要求转换为定制策略,校验提示词和响应,并在内容被处理、输出或下游路由之前强制执行策略。 NVIDIA 定制策略生成器技能
NVIDIA NeMo Guardrails 技能

常见问题解答

AI 模型是推理引擎——它处理输入并生成输出。 AI 工具是一种特定的可调用的功能,例如 Web 搜索或数据库查询,作用是拓展模型能够执行操作的对象范围。

智能体技能是一组更高级别的指令集,教会智能体如何通过以定义的顺序协调一个或多个工具,以及工作流逻辑、访问要求和治理元数据,来实现目标。 将模型视为引擎,各类工具是引擎能够操控的独立操作杆,而技能则是一套标准化执行方案,保障任务稳定、可靠地完成。

AI 模型是处理输入、生成输出的推理引擎。 智能体技能则给出指令,指导模型在给定上下文中进行操作。 将模型视为推理引擎,将技能视为结构化的领域专业知识——这两者都是可靠、专业的任务执行所必需的。

大多数 AI 智能体工具支持技能,方法是将智能体指向本地或远程 SKILL.md 文件,或通过一条命令从注册服务器安装技能(例如:claude mcp add github.com/nvidia/skills/cuopt)。

安装后,智能体会读取技能说明,并在任务与技能的触发标准匹配时自动调用。 通常无需额外的配置。

是的依照 agentskills.io 这类开放规范所开发的技能,具备跨平台可移植特性,能够兼容各类 AI 代码助手、多智能体框架以及企业级平台。同一份技能文件无需修改,即可在各类环境中稳定正常运行。

一项经过验证的技能已经过安全风险审查,该技能已由其发布者通过加密签名,并与记录所有权、依赖项、局限性和验证状态的技能卡配对。 验证使开发者能够在安装之前确认技能是真实的、自发布以来未经修改的,并且可以安全地在其环境中运行。

技能卡是一个机器可读的文档,与已发布的智能体技能相结合,总结了其信任和治理元数据:谁构建了它、它的功能、它访问的工具和 APIs、已知限制、许可证,以及它是否通过了安全扫描或质量评估。技能卡帮助开发者和企业团队审计、批准和跟踪技能。

查看 github.com/NVIDIA/Trustworthy-AI 公开发布的 NVIDIA Skills Card 架构。

后续步骤

在 GitHub 上访问 NVIDIA 验证的技能

开发者可以使用开源、经过 NVIDIA 验证的智能体技能。

了解 NVIDIA Agent Toolkit

从开放模型到用于开发工作流的智能体技能,NVIDIA Agent Toolkit 能够帮助企业完成应用定制化开发与全流程管控。

探索用于科学发现的 NVIDIA BioNeMo Agent Toolkit

了解生命科学智能体时代的专属工具与配套技能