10个主流RAG框架&最新技术架构

10个主流RAG框架 最近RAG的轮子越来越多，先后已经出现了多个RAG框架，例如langchain, llamaindex,langraph，qanything, ragflow等，例如通过github可以找到如下排序，top10框架：（图 1） ?? Highlights ?? 全新的技术框架 一款由LLM（大型语言模型）驱动的信息整合工具，它提供了一个用于检索增强生成（RAG）的技术框架，并为AI Agent提供了使用工具的指导。 ?? 良好的兼容性 SODA能够轻松切换组件，使用不同的搜索引擎、向量数据库或LLM，并展现出良好的兼容性。 ?? 可靠&信息来源可追溯 SODA有效地解决了LLM的部分幻觉问题，提供了可追溯信息源的可靠且准确的答案。 ?? 数据隐私 SODA支持本地数据库，允许模型在不进行预训练或微调的情况下获取新知识，同时有效保护用户数据隐私。 其中在文本检索阶段，采用两阶段检索过程，第一阶段从数据库中检索信息，第二阶段对检索到的文本进行重新排序，其实标准的重排。 举例： 文本检索，其通过构建本地文本数据库并从中检索信息，通过修改上传的文件的路径，其中文件包括TXT, DOCX, PDF等文件格式。 图像检索结果，构建本地图像数据库并从中检索图像，其中核心在于图像embedding的生成，该项目中使用使用CLIP-B/32作为图像编码器。 网络检索结果，其核心在于利用各种搜索引擎的API来根据用户输入检索相关信息，包括google、Serper、Bing等不同的API。