一篇RAG标准和腾讯云ES的技术实践
1、RAG的发展背景:回顾搜索技术的演进与RAG技术的发展
2、信通院检索增强生成RAG技术标准:该标准包含知识库构建、知识的检索、内容生成、质量评估、平台能力等五大能力域,17 个能力子域,50 个能力项
3、ES在RAG的一站式解决方案,在一个技术栈里面结合了向量生成、存储、索引、检索以及大模型等多项技术
•文本/图片/视频向量化:支持三种向量模型使用,通过自有模型ELSER和Multigual-e5、调用OpenAI和HF平台模型API、第三方模型部署。
•召回排序:内置RRF导数融合排序,以及LTR基于模型的排序能力。
•文本和向量混合搜索:通过关键字加向量搜索这种搭配,通过向量检索先将一批相关性的内容收到,然后再通过关键字去做进一步的精准匹配。