即刻AI圈子 2024年09月21日
Anthropic 发布了一种可以大幅增加 RAG 检索准确性的方案。 Contextual Retrieval embeddings + contextual BM25,检索失败几率降低 49%。 主要方法是: 使用 Cl...
index_new5.html
../../../zaker_core/zaker_tpl_static/wap/tpl_guoji1.html

 

Anthropic发布方案,可大幅增加RAG检索准确性,降低检索失败几率,主要通过Claude为文本片段生成上下文等方法实现。

🧐Anthropic的方案中,使用Claude为每个文本片段生成上下文。具体操作是将文本片段和整个文档一同输入给Claude,然后在嵌入处理前,把生成的上下文添加到每个文本片段的前面,以此来提高RAG检索的准确性。

📄在检索步骤中,该方案结合使用了上下文嵌入和上下文BM25技术,这两种技术的结合能够更有效地提高检索的准确性,降低检索失败的几率。

⚠️此方案需要配合提示缓存来使用,否则会消耗大量Token。若不使用提示缓存,可能会导致资源的浪费和成本的增加。

Anthropic 发布了一种可以大幅增加 RAG 检索准确性的方案。

Contextual Retrieval embeddings + contextual BM25,检索失败几率降低 49%。

主要方法是:

使用 Claude 为每个文本片段生成上下文。具体做法是将文本片段和整个文档一起输入给 Claude。

在进行嵌入 处理之前,先将生成的上下文添加到每个文本片段的前面。

在检索步骤中,结合使用上下文嵌入和上下文 BM25 技术。

需要配合提示缓存来使用,不然会消耗大量 Token。

详细信息:https://www.anthropic.com/news/contextual-retrieval

Fish AI Reader

Fish AI Reader

AI辅助创作,多种专业模板,深度分析,高质量内容生成。从观点提取到深度思考,FishAI为您提供全方位的创作支持。新版本引入自定义参数,让您的创作更加个性化和精准。

FishAI

FishAI

鱼阅,AI 时代的下一个智能信息助手,助你摆脱信息焦虑

联系邮箱 441953276@qq.com

相关标签

Anthropic RAG检索 上下文嵌入 BM25
相关文章