返回顶部
热门问答 更多热门问答
技术文章 更多技术文章

PromptWizard:微软推出自家APE框架,主打“任务感知”,性能不错成本还低

[复制链接]
链载Ai 显示全部楼层 发表于 3 小时前 |阅读模式 打印 上一主题 下一主题

ingFang SC", system-ui, -apple-system, "system-ui", "Helvetica Neue", "Hiragino Sans GB", "Microsoft YaHei UI", "Microsoft YaHei", Arial, sans-serif;font-size: 15px;letter-spacing: normal;"/>

近期,微软研究院也推出了一款能够自我迭代Prompt的项目——PromptWizard,在此之前我们介绍过几款APE领域的框架,比如Dspy,Ape等。如:

Weavel Ape超过DSPy,或将成为最好用的提示(prompt)优化工具

DSPy(声明式自改进语言程序),面向大模型编程的新方法,克服当前LLM应用开发的诸多缺点

ingFang SC", system-ui, -apple-system, BlinkMacSystemFont, "Helvetica Neue", "Hiragino Sans GB", "Microsoft YaHei UI", "Microsoft YaHei", Arial, sans-serif;">PromptWizard 的优化思路与它们类似,都是通过收集反馈样本,进而自动优化Prompt,然而不同的是,PromptWizard具有独特的"反馈驱动"机制,它能够让 AI 模型在感知不同的任务的情况下,自主生成、评估和改进Prompt,这样可以大大提升模型在不同任务中的性能,也正是如此他们称自己的框架为“Task-Aware Prompt Optimization Framework”。在时间和空间维度上都能保证性能,是策略优化的挑战。毕竟,人工撰写的提示词很难针对不同任务精心雕琢,也不可能随着时间不断迭代。这和AI 1.0时代,推荐、风控模型的发展的逻辑是一样的。显然,PromptWizard恰好同时满足。

ingFang SC", system-ui, -apple-system, BlinkMacSystemFont, "Helvetica Neue", "Hiragino Sans GB", "Microsoft YaHei UI", "Microsoft YaHei", Arial, sans-serif;">

ingFang SC", system-ui, -apple-system, "system-ui", "Helvetica Neue", "Hiragino Sans GB", "Microsoft YaHei UI", "Microsoft YaHei", Arial, sans-serif;letter-spacing: normal;background-color: rgb(255, 255, 255);">我们来具体看看它的"自进化"机制,分为三步:

ingFang SC", system-ui, -apple-system, "system-ui", "Helvetica Neue", "Hiragino Sans GB", "Microsoft YaHei UI", "Microsoft YaHei", Arial, sans-serif;letter-spacing: normal;background-color: rgb(255, 255, 255);">第一步,反馈驱动的迭代优化:AI 模型能够持续生成并评估不同版本的提示词,不断完善指令和示例。

ingFang SC", system-ui, -apple-system, "system-ui", "Helvetica Neue", "Hiragino Sans GB", "Microsoft YaHei UI", "Microsoft YaHei", Arial, sans-serif;letter-spacing: normal;background-color: rgb(255, 255, 255);">

ingFang SC", system-ui, -apple-system, "system-ui", "Helvetica Neue", "Hiragino Sans GB", "Microsoft YaHei UI", "Microsoft YaHei", Arial, sans-serif;letter-spacing: normal;background-color: rgb(255, 255, 255);">第二步,联合优化指令和样例:通过合成多样且任务相关的样例,同时优化指令和上下文示例。

ingFang SC", system-ui, -apple-system, "system-ui", "Helvetica Neue", "Hiragino Sans GB", "Microsoft YaHei UI", "Microsoft YaHei", Arial, sans-serif;letter-spacing: normal;background-color: rgb(255, 255, 255);">

ingFang SC", system-ui, -apple-system, "system-ui", "Helvetica Neue", "Hiragino Sans GB", "Microsoft YaHei UI", "Microsoft YaHei", Arial, sans-serif;letter-spacing: normal;background-color: rgb(255, 255, 255);">第三步,自生成推理步骤:引入自主生成的思考链(Chain of Thought),增强问题解决能力。

更牛的是,PromptWizard 仅需极少量训练数据(5个示例)就能取得出色性能。在多个数据集上,它的平均准确率达到 81.9%,最高可达 95.4%。

更重要的是,传统的自动优化方案,都会带来大量的模型调用,从而产生巨额成本,但它却表现惊艳,API 调用仅需 69 次,远低于其他方案的数千次调用,token 数量不到其他方案的 5%。

这项技术不仅简化了提示词优化流程,还为大模型的自适应学习开辟了新途径。无论是解数学题、生成创意内容,还是处理专业文档,PromptWizard 都能够自适应。

随着这类自我迭代的框架不断发展,Prompt工程范式将会发生变革。Prompt工程师的发展趋势,显著与当年的策略专家趋同,随着精细化和实时性的要求,这类具体的Prompt的优化将会被机器所替代,提示工程师也将从具体的Prompt撰写向应用场景开发和架构设计转变。

回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

链载AI是专业的生成式人工智能教程平台。提供Stable Diffusion、Midjourney AI绘画教程,Suno AI音乐生成指南,以及Runway、Pika等AI视频制作与动画生成实战案例。从提示词编写到参数调整,手把手助您从入门到精通。
  • 官方手机版

  • 微信公众号

  • 商务合作

  • Powered by Discuz! X3.5 | Copyright © 2025-2025. | 链载Ai
  • 桂ICP备2024021734号 | 营业执照 | |广西笔趣文化传媒有限公司|| QQ