HyperAIHyperAI

Command Palette

Search for a command to run...

生成式 AI
LLM

AutoSynthData:企业智能体训练数据自动生成框架

ServiceNow CoreAI推出AutoSynthData系统,旨在自动化生成面向企业智能体的专项训练数据。企业智能体在实际应用中常因工作流、工具调用或环境策略差异而表现不佳,传统单点故障难以直接转化为高质量训练集。AutoSynthData通过评估目标模型在目标环境中的失败模式,结合更强教师模型的执行路径,精准定位能力缺口,并据此生成具备可行性、真实性与适当难度的训练任务。该系统采用两阶段数据构建策略,首阶段生成核心样本,经过正负验证与自动修复机制确保任务可执行且评估器逻辑严密;次阶段基于核心样本进行多维度变体扩展,严控数据漂移。所有样本均通过样本级质量审查与批次级覆盖度分析,形成动态更新的训练课程表。随着模型能力迭代,系统自动将数据生成重心转移至尚未攻克的技术边界。在EnterpriseOps Gym基准测试中,该系统显著提升了Gemma-4-26B智能体的实战表现。在混合业务与IT服务管理场景中,模型平均Pass@1指标分别实现35%的相对提升及由18.77%跃升至27.18%。该方案验证了基于能力缺口导向的合成数据生成机制在定制化企业AI训练中的高效性,为后续强化学习等进阶训练路径提供了可扩展的技术基础。

相关链接