返回顶部
热门问答 更多热门问答
技术文章 更多技术文章

智能体工具调度的新突破:8B小模型击败GPT-5

[复制链接]
链载Ai 显示全部楼层 发表于 昨天 22:42 |阅读模式 打印 上一主题 下一主题

香港大学与NVIDIA团队发现搭建智能体工作流的两个关键问题:仅靠提示词工程的工作流存在性能天花板,同时,静态路由策略还会导致资源浪费。


针对于此,他们通过其ToolOrchestra框架强化学习训练了一个8B参数的调度模型(Orchestrator-8B),在三个基准测试中表现突出:

  • HLE(人类最后一考):37.1%准确率,超越GPT-5的35.1%
  • τ²-Bench:成本降低70%的情况下准确率更高
  • FRAMES:响应延迟降低40%

研究团队发现传统工作流存在两个典型缺陷:

  • 自我增强偏见:过度调用自身简化版模型(如GPT-5-mini被调用占比达66%)
  • 资源错配:78%的简单任务仍调用顶级模型

而ToolOrchestra的解决的核心在于端到端强化学习训练,方案上:

  1. 多目标强化学习同时优化结果质量、效率和用户偏好
  2. 支持长周期决策,能自主判断何时调用何种工具(包括本地搜索、代码解释器、专业大模型等)
  3. 内置成本控制机制,避免无脑调用最贵模型

团队还开源了完整训练数据集ToolScale,覆盖10个领域(金融、体育、电商等),包含4063个多轮工具调用任务。数据生成采用两步流程:先模拟真实环境(数据库schema和API),再生成多样化任务。包含10个领域的数千条多轮工具调用记录。

有开发者尝试部署后反馈,在电影票务系统等需要多步操作的场景中,响应速度比传统方案快2-3倍。

回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

链载AI是专业的生成式人工智能教程平台。提供Stable Diffusion、Midjourney AI绘画教程,Suno AI音乐生成指南,以及Runway、Pika等AI视频制作与动画生成实战案例。从提示词编写到参数调整,手把手助您从入门到精通。
  • 官方手机版

  • 微信公众号

  • 商务合作

  • Powered by Discuz! X3.5 | Copyright © 2025-2025. | 链载Ai
  • 桂ICP备2024021734号 | 营业执照 | |广西笔趣文化传媒有限公司|| QQ