每日推荐一篇专注于解决实际问题的外文,精准翻译并深入解读其要点,助力读者培养实际问题解决和代码动手的能力。
欢迎关注公众号(NLP Research),及时查看最新内容
原文标题:Implement Contextual Compression And Filtering In RAG Pipeline
原文地址:https://medium.com/dphi-tech/implement-contextual-compression-and-filtering-in-rag-pipeline-4e9d4a92aa8f
上下文压缩器和过滤器
在 RAG 中,我们可能面临的最大问题之一是,检索器究竟能检索到哪些内容。
检索到的上下文并非全部有用。在传递的大块信息中,只有极少部分对整个答案具有实际意义。
有时,某个特定问题需要多个分块的答案或事实,而这些答案或事实需要综合在一起。
此外,在某些情况下,我们必须对问题进行澄清,而我们不希望其他事实与实际查询一起被引入到上下文学习窗口中。