返回顶部
热门问答 更多热门问答
技术文章 更多技术文章

组合 FSDP 和 PEFT 方法微调 Meta Llama3覆盖单/多节点 GPU

[复制链接]
链载Ai 显示全部楼层 发表于 昨天 09:39 |阅读模式 打印 上一主题 下一主题

用于使用可组合 FSDP 和 PEFT 方法微调 Meta Llama3 以覆盖单/多节点 GPU 的脚本。支持摘要和问答等应用程序的默认和自定义数据集。支持HF TGI、VLLM等多种坦白推理解决方案,用于本地或云端部署。演示应用程序展示适用于 WhatsApp 和 Messenger 的 Meta Llama3。

“llama-recipes”存储库是Meta Llama 3模型的配套产品。该存储库的目标是提供一个可扩展的库,用于微调 Meta Llama 模型,以及一些示例脚本和笔记本,以便快速开始在各种用例中使用模型,包括域适应的微调和使用 Meta Llama 和 LLM 生态系统中的其他工具构建基于 LLM 的应用程序。这里的示例展示了如何在本地、云端和本地运行 Meta Llama。此存储库还支持Meta Llama 2 。由于Meta Llama 3的增强功能,我们强烈建议大家使用它。

github:‍‍https://github.com/meta-llama/llama-recipes

回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

链载AI是专业的生成式人工智能教程平台。提供Stable Diffusion、Midjourney AI绘画教程,Suno AI音乐生成指南,以及Runway、Pika等AI视频制作与动画生成实战案例。从提示词编写到参数调整,手把手助您从入门到精通。
  • 官方手机版

  • 微信公众号

  • 商务合作

  • Powered by Discuz! X3.5 | Copyright © 2025-2025. | 链载Ai
  • 桂ICP备2024021734号 | 营业执照 | |广西笔趣文化传媒有限公司|| QQ