ingFang SC", Cambria, Cochin, Georgia, Times, "Times New Roman", serif;margin: 1em 4px;line-height: 26px;">RAG系统的检索失败率暴跌67%！ingFang SC", Cambria, Cochin, Georgia, Times, "Times New Roman", serif;padding-top:8px;padding-bottom:8px;margin:1em 4px;line-height:26px;color:black;">这不是魔法，而是上下文数据增强的威力。ingFang SC", Cambria, Cochin, Georgia, Times, "Times New Roman", serif;padding-top:8px;padding-bottom:8px;margin:1em 4px;line-height:26px;color:black;">![]() ingFang SC", Cambria, Cochin, Georgia, Times, "Times New Roman", serif;margin: 0px auto;width: auto;max-width: 100%;height: auto !important;" width="auto" src="https://api.ibos.cn/v4/weapparticle/accesswximg?aid=89894&url=aHR0cHM6Ly9tbWJpei5xcGljLmNuL3N6X21tYml6X2pwZy9NM1ByaFNVSUNuSDZpY3Vkd3NOUGtBV2UzTXh2cElZSlEycDR6bTRYU3BhYzRUMmljUEtwM0taeHFuNDhqeURXUFlzTDFjWG5GajJ6OFFTblFFVTIwZDlBLzY0MD93eF9mbXQ9anBlZw=="/>ingFang SC", Cambria, Cochin, Georgia, Times, "Times New Roman", serif;padding-top:8px;padding-bottom:8px;margin:1em 4px;line-height:26px;color:black;">还在为RAG（检索增强生成）系统的检索准确率发愁吗？ingFang SC", Cambria, Cochin, Georgia, Times, "Times New Roman", serif;padding-top:8px;padding-bottom:8px;margin:1em 4px;line-height:26px;color:black;">别担心，ingFang SC", Cambria, Cochin, Georgia, Times, "Times New Roman", serif;color:#35b378;">"上下文检索"（contextual retrieval）这个新概念可能就是你一直在寻找的解决方案。ingFang SC", Cambria, Cochin, Georgia, Times, "Times New Roman", serif;padding-top:8px;padding-bottom:8px;margin:1em 4px;line-height:26px;color:black;">一年前，这种方法因为成本高昂而被认为不切实际。但现在，随着小型语言模型（SLM）的飞速发展，这个曾经的"天方夜谭"已经变成了触手可及的现实。ingFang SC", Cambria, Cochin, Georgia, Times, "Times New Roman", serif;padding-top:8px;padding-bottom:8px;margin:1em 4px;line-height:26px;color:black;">一起来深入了解这个可能彻底改变RAG应用格局的技术吧！ingFang SC", Cambria, Cochin, Georgia, Times, "Times New Roman", serif;margin-bottom:15px;font-weight:bold;color:#35b378;font-size:23px;bmin-height:32px;line-height:32px;border-bottom:solid 1px #000;display:inline-block;border-bottom-width:0;border-bottom-style:solid;border-color:#35b378;padding-top:5px;padding-right:0.5em;padding-left:0.5em;margin:1em 0 0rem 0;padding:0.5em 0;text-align:leftt;">什么是上下文数据增强？在机器学习界有句老话："垃圾进，垃圾出"。这句话在RAG应用中同样适用——你的RAG系统的表现，很大程度上取决于它检索到的上下文质量。 而上下文数据增强，就是通过在文本块中添加有用信息，来提高检索的准确性和降低失败率的方法。 一个生动的例子想象一下这样一个场景： 问题：「ACME公司2023年第二季度的收入增长是多少？」 原始文本块：「该公司的收入比上一季度增长了3%。」 乍一看，这个文本块似乎提供了正确的信息。但仔细想想，我们真的确定这是在说ACME公司吗？这真的是2023年第二季度的数据吗？ 这就是上下文数据增强发挥作用的地方。使用SLM，我们可以在文本块进入索引之前对其进行增强： 增强后的文本块：「这段信息来自ACME公司2023年第二季度的SEC文件；上一季度的收入为3.14亿美元。该公司的收入比上一季度增长了3%。」 看到区别了吗？ 增强后的文本块不仅提供了原始信息，还添加了关键的上下文细节，大大提高了检索的准确性。 为什么现在可行？你可能会问，既然这么有用，为什么之前没人这么做？ 答案很简单：成本。 一年前，对海量文本块进行这样的增强处理，无论是在计算资源还是时间成本上，都是一个巨大的负担。 但现在，随着小型语言模型（SLM）的性能大幅提升和成本显著下降，这种方法已经变得可行且经济。 虽然对于包含数十亿文本块的超大型数据集来说，这种方法可能仍然不太实际，但对于大多数RAG应用来说，这绝对是一个值得探索的优化方向。 实施建议如果你正在为RAG系统的检索准确率问题头疼，不妨考虑在数据摄入阶段加入上下文数据增强这一步骤。具体可以： 使用小型但高效的语言模型进行文本增强 针对不同类型的数据，设计特定的增强策略 对增强后的文本进行质量检查，确保新增信息的准确性 评估增强前后的检索性能，量化改进效果
结语上下文数据增强无疑为RAG系统带来了新的可能。它不仅能提高检索准确率，还能为下游任务提供更丰富、更有价值的上下文信息。 当然，这项技术还在不断发展中。我们期待看到更多创新的应用和优化方法，进一步推动RAG系统的性能提升。 你的RAG准备好升级了吗？ |
