|
这个项目分享Azure团队收集的经验教训，以安全的方式在企业范围内启用 Azure OpenAI。GPT-RAG 核心是在 Azure 中运行的检索增强生成模式，使用 Azure 认知搜索进行检索，并使用 Azure OpenAI 大型语言模型来支持 ChatGPT 风格和问答体验。 
RAG模式使企业能够利用LLM的推理能力，使用现有模型处理并基于新数据生成响应。RAG简化了周期性数据更新，无需微调，从而简化了LLM与企业的集成。企业级RAG解决方案加速器（GPT-RAG）提供了一个专为企业级部署RAG模式而设计的健壮架构。它确保了基于事实的响应，并且构建在零信任安全和负责任的AI之上，确保了可用性、可扩展性和可审计性。非常适合从探索和PoC阶段过渡到全面生产和MVP的组织。
- 零信任安全架构：GPT-RAG 以零信任原则加固的全面架构优先考虑数据安全。Azure虚拟网络、Web应用程序防火墙和安全远程访问等功能，保护敏感数据免受未授权访问。
- 无缝用户体验的自动扩展：通过自动化扩展动态适应不同的工作负载，确保即使在高峰需求期间也能提供流畅的用户体验。Cosmos DB集成进一步为未来的分析存储解决方案铺平了道路。
- 全面的可观测性系统：通过Azure Application Insights深入了解系统性能。详细的分析和日志使持续改进成为可能，以实现在复杂企业环境中最优的LLM部署。
- 关键组件：数据摄取用于高效的Azure OpenAI准备，编排器用于用户交互管理，前端应用程序使用Azure App Services构建，以提供流畅的用户界面。高效的AI工作负载处理：利用Azure Open AI、Azure AI服务和Cosmos DB的协同作用，实现无缝的LLM集成和推理能力。消除了持续微调的需求，简化了LLM融入多样化业务工作流程的过程。
|
