返回顶部
热门问答 更多热门问答
技术文章 更多技术文章

Google研究发现:Multi-Agent的核心竟然是Prompt设计!

[复制链接]
链载Ai 显示全部楼层 发表于 昨天 18:38 |阅读模式 打印 上一主题 下一主题


在多智能体系统(MAS:multi-agent systems)中,设计有效的提示和拓扑结构面临挑战,因为单个智能体可能对提示敏感,且手动设计拓扑结构需要大量实验。

论文地址:https://arxiv.org/pdf/2502.02533

论文名称:Multi-Agent Design: Optimizing Agents with Better Prompts and Topologies

为了自动化整个设计过程,Google & 剑桥大学首先对设计空间进行了深入分析,旨在了解构建有效MAS的因素。发现:提示设计对下游性能有显著影响,而有效的拓扑结构只占整个搜索空间的一小部分。
在数学问题上,Gemini 1.5 Pro 对比仅使用自我一致性(SC)、自我细化(reflect)和多智能体辩论(debate)进行扩展的智能体,展示了每个问题的提示优化智能体的准确率与总标记数的关系。误差条表示1个标准差。我们表明,通过更有效的提示,利用更多的计算资源可以获得更高的准确率。
使用 Gemini 1.5 Pro 的不同拓扑结构的性能与基础智能体相比,每个拓扑结构都通过 APO 进行了优化,其中“Sum.”(总结)和“Exe.”(执行器)是如图4所示的任务特定拓扑结构。我们观察到,并非所有拓扑结构都对多智能体系统(MAS)设计有积极影响。

基于这些发现,Google&剑桥大学提出了Mass框架,该框架通过三个阶段优化MAS:

    ingFang SC', -apple-system, 'system-ui', 'Segoe UI', system-ui, -apple-system, 'Segoe UI', Roboto, Ubuntu, Cantarell, 'Noto Sans', sans-serif, Arial, 'Source Han Sans SC', 'Microsoft YaHei UI', 'Microsoft YaHei', 'Noto Sans CJK SC', sans-serif;margin: 0px 0px 16px;padding: 0px 0px 0px 24px;border: 0px;font-style: normal;font-variant-ligatures: normal;font-variant-caps: normal;font-variant-numeric: inherit;font-variant-east-asian: inherit;font-variant-alternates: inherit;font-weight: 400;font-stretch: inherit;font-size: 14px;line-height: inherit;font-optical-sizing: inherit;font-kerning: inherit;font-feature-settings: inherit;font-variation-settings: inherit;vertical-align: baseline;list-style: decimal;color: rgba(255, 255, 255, 0.84);letter-spacing: 0.5px;orphans: 2;text-align: start;text-indent: 0px;text-transform: none;widows: 2;word-spacing: 0px;-webkit-text-stroke-width: 0px;white-space: normal;background-color: rgb(18, 18, 18);text-decoration-thickness: initial;text-decoration-style: initial;text-decoration-color: initial;" class="list-paddingleft-1">
  1. 块级(局部)提示优化:对每个拓扑块中的智能体进行提示优化。

  2. 工作流拓扑优化:在修剪过的拓扑空间中优化工作流拓扑结构。

  3. 工作流级(全局)提示优化:在找到的最佳拓扑结构上进行全局提示优化。

提出的多智能体系统搜索(Mass)框架通过在可定制的多智能体设计空间中交错进行提示优化和拓扑优化,发现了有效的多智能体系统设计(右侧为经过优化的拓扑结构和优化的提示),关键组件如左侧所示

实验使用了Gemini 1.5 Pro和Flash模型,并与多种现有方法进行了比较,包括链式思考(CoT)、自我一致性(SC)、自我细化(Self-Refine)、多智能体辩论(Multi-Agent Debate)、ADAS和AFlow。

    ingFang SC', -apple-system, 'system-ui', 'Segoe UI', system-ui, -apple-system, 'Segoe UI', Roboto, Ubuntu, Cantarell, 'Noto Sans', sans-serif, Arial, 'Source Han Sans SC', 'Microsoft YaHei UI', 'Microsoft YaHei', 'Noto Sans CJK SC', sans-serif;margin: 0px 0px 16px;padding: 0px 0px 0px 24px;border: 0px;font-style: normal;font-variant-ligatures: normal;font-variant-caps: normal;font-variant-numeric: inherit;font-variant-east-asian: inherit;font-variant-alternates: inherit;font-weight: 400;font-stretch: inherit;font-size: 14px;line-height: inherit;font-optical-sizing: inherit;font-kerning: inherit;font-feature-settings: inherit;font-variation-settings: inherit;vertical-align: baseline;list-style: disc;color: rgba(255, 255, 255, 0.84);letter-spacing: 0.5px;orphans: 2;text-align: start;text-indent: 0px;text-transform: none;widows: 2;word-spacing: 0px;-webkit-text-stroke-width: 0px;white-space: normal;background-color: rgb(18, 18, 18);text-decoration-thickness: initial;text-decoration-style: initial;text-decoration-color: initial;" class="list-paddingleft-1">
  • 性能提升:Mass在多个任务上显著优于现有方法,平均性能提升约10%以上。

  • 优化阶段的重要性:通过分阶段优化,Mass在每个阶段都取得了性能提升,证明了从局部到全局优化的必要性。

  • 提示和拓扑结构的协同优化:Mass通过同时优化提示和拓扑结构,实现了比单独优化更好的性能。

  • 成本效益:Mass在优化过程中表现出稳定且有效的性能提升,与现有自动设计方法相比,具有更高的样本效率和成本效益。


回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

链载AI是专业的生成式人工智能教程平台。提供Stable Diffusion、Midjourney AI绘画教程,Suno AI音乐生成指南,以及Runway、Pika等AI视频制作与动画生成实战案例。从提示词编写到参数调整,手把手助您从入门到精通。
  • 官方手机版

  • 微信公众号

  • 商务合作

  • Powered by Discuz! X3.5 | Copyright © 2025-2025. | 链载Ai
  • 桂ICP备2024021734号 | 营业执照 | |广西笔趣文化传媒有限公司|| QQ