RAG要被颠覆了？亚马逊最新研究：仅用关键词搜索+Agent，就能达到传统RAG 90%性能，还不用向量数据库

在大模型应用落地中检索增强生成RAG早已成为解决幻觉、接入私有知识库的标配方案。而提到RAG大家的第一反应就是向量数据库、嵌入模型、分块策略——似乎这套复杂的链路是实现高质量知识库问答的必经之路。但亚马逊AWS的最新研究直接打破了这个行业共识。在题为《Keyword search is all you need》的论文中亚马逊团队提出了一个颠覆性结论基于智能体Agent的关键词搜索无需任何向量数据库和语义检索就能达到传统RAG系统90%以上的性能表现在复杂金融文档场景中甚至能反超RAG。这篇论文不仅用详实的实验击穿了“向量检索是RAG核心”的固有认知更为轻量化、低成本的大模型知识库落地提供了一套全新的范式。一、行业痛点传统RAG困在“向量数据库”的枷锁里自从2020年RAG架构被提出以来它就成了大模型落地的“事实标准”。通过将文档分块、向量化存入向量数据库用户查询时先做语义检索匹配相关片段再交给大模型生成答案这套流程完美解决了大模型幻觉、知识更新滞后的问题。但随着行业应用的深入传统RAG的短板也暴露无遗集成与维护成本极高一套完整的RAG系统需要搭配嵌入模型、向量数据库、分块策略调优开发链路复杂知识库每次更新都需要重新执行分块、嵌入、索引入库的全流程对于高频更新的场景极不友好。检索质量强依赖人工调优分块大小、重叠率、检索条数、嵌入模型选型都会直接影响最终效果很多时候RAG效果差本质是人工调优没做到位。复杂文档处理能力拉胯面对带表格、长段落、复杂结构的PDF文档如上市公司财报、技术白皮书固定分块策略很容易把完整信息拆碎导致语义检索根本找不到正确的上下文。正是这些痛点让研究者开始思考语义检索和向量数据库真的是RAG不可缺少的部分吗有没有更简单、更低成本的方案二、破局方案Agent关键词搜索扔掉向量数据库也能打亚马逊团队给出的答案是一套基于工具增强的Agentic关键词搜索框架。它的核心逻辑极其简单不用分块、不用嵌入、不用向量数据库直接让大模型通过ReAct推理框架自主调用Linux命令行工具在原始文档中做关键词/正则搜索迭代获取上下文最终生成答案。两种方案的核心流程对比如下图所示图1RAG与Agent-based QnA管线对比红色为传统RAG流程蓝色为本文提出的Agent搜索流程*整个Agent的工作流被封装成了一套可迭代的搜索算法核心步骤如下初始阶段Agent先执行脚本读取目标文件夹内所有文档的元数据先搞清楚“有哪些文档、分别是什么主题”基于用户查询Agent自主生成rga/pdfgrep等Linux搜索命令在Shell中执行获取关键词匹配的原文上下文根据搜索结果判断是否需要补充搜索、调整关键词/正则还是已经获取了足够的信息生成答案迭代执行搜索-判断流程直到达到最大迭代次数或找到完整答案后停止搜索输出最终结果。这套方案最惊艳的地方是它把“信息检索”的决策权完全交给了大模型的推理能力而非固定的语义检索算法。Agent可以根据查询的复杂程度自主决定做宽泛搜索还是精准定位甚至可以通过多轮搜索补全上下文彻底摆脱了传统RAG固定分块的限制。三、核心实验90%性能追平RAG复杂场景直接反超为了验证这套方案的有效性亚马逊团队做了全面的对照实验用标准RAG系统作为基线在6个覆盖不同领域、不同难度的数据集上做了横向对比最终用RAGAS框架做了全维度评估。实验设置•基线RAG方案亚马逊Bedrock平台Titan Text V2嵌入模型1024维300token分块20%重叠OpenSearch无服务向量索引Anthropic Claude 3 Sonnet生成答案。•Agent搜索方案同样基于Claude 3 Sonnet模型LangChain ReAct框架可调用pdfmetadata、rga、pdfgrep三款Shell工具温度设置为0.001保证结果稳定。•评估指标忠实度Faithfulness、上下文召回率Context Recall、答案正确率Answer Correctness均为RAG领域的核心评估标准。核心结果全维度追平传统RAG实验结果如下表所示其中Attainment达成率代表Agent方案达到传统RAG基线的性能百分比数据集名称忠实度上下文召回率答案正确率AgentRAG达成率(%)AgentRAG达成率(%)AgentRAG达成率(%)PaulGrahamEssay0.86620.905695.650.75270.858387.700.58080.726879.91Llama2Paper0.72520.819988.450.61480.871370.560.58230.666187.42HistoryOfAlexnet0.72800.765795.080.69680.833083.650.64060.707390.57BlockchainSolana0.81220.862794.150.74220.745099.620.58700.587299.97LLM Survey paper0.80610.812199.260.63550.643898.710.51230.514899.51平均94.5288.0591.48表1Agent与RAG在各数据集上的指标对比平均达成率超90%从结果可以看到这套无向量数据库的Agent方案实现了极其亮眼的表现• 平均忠实度达到RAG的94.52%保证了生成答案的事实一致性有效抑制幻觉• 平均上下文召回率达到88.05%在技术文档场景中几乎与RAG持平• 平均答案正确率达到91.48%其中Solana区块链、LLM综述两个数据集正确率达成率分别达到99.97%和99.51%与传统RAG几乎没有差距。下图直观展示了这两个核心数据集上Agent与RAG的指标覆盖度对比二者的柱子几乎完全重合图2BlockchainSolana与LLM Survey Paper数据集上Agent与RAG的指标覆盖对比*炸裂发现复杂金融文档Agent反超RAG6个百分点如果说常规数据集上Agent是“追平RAG”那在高难度的FinanceBench金融财报数据集上Agent方案实现了对传统RAG的全面反超。这个数据集包含上市公司10-K、10-Q财报、业绩公告等充斥着大量表格、交叉引用和专业术语是传统RAG的“老大难”场景。实验结果如下表所示系统配置答案正确率(%)传统RAG24.24Agent(3轮平均)32.71Agent(第4轮)39.64表2FinanceBench数据集上Agent与RAG的答案正确率对比传统RAG的正确率仅为24.24%而Agent方案平均正确率达到32.71%最高达到39.64%相对提升超60%绝对提升近16个百分点。背后的核心原因是传统RAG的固定分块会把财报中的表格、跨页数据拆得支离破碎语义检索根本无法获取完整的上下文而Agent可以通过关键词精准定位到相关表格和段落自主获取完整的上下文信息完美解决了复杂结构文档的检索难题。四、方案优势与局限什么时候该扔掉向量数据库核心优势极致的低成本与易用性无需维护向量数据库省去嵌入模型调用、分块调优、索引更新的所有成本新增文档直接丢入文件夹即可零成本更新知识库。复杂文档处理能力更强对于带表格、跨页引用、复杂结构的PDF文档效果远超固定分块的传统RAG。极高的可复现性纯命令行工具实现无需复杂的环境配置比Claude Computer Use等GUI操作方案更稳定、更易复现。完美适配高频更新场景对于政策、财报、新闻等需要频繁更新知识库的场景彻底摆脱了传统RAG“更新一次就要重跑一次全流程”的痛点。客观局限论文中也明确提到了这套方案的短板在长文档、模糊语义查询、跨段落多跳推理的场景中性能会有明显下降对于需要深度语义理解的议论文、散文类文本效果不如传统RAG同时也受限于大模型的上下文窗口无法处理超大规模文档。五、写在最后这篇论文的价值从来不是“彻底干掉RAG和向量数据库”而是给整个行业提供了一个全新的思路RAG的核心是“检索增强生成”而不是“向量检索增强生成”。在很多实际落地场景中开发者们过度神化了向量数据库和语义检索把RAG系统做得越来越复杂却忽略了“让大模型找到正确信息”这个最本质的目标。而亚马逊的这项研究证明很多时候一个简单的Agent关键词搜索就足以满足绝大多数场景的需求还能省去90%的开发和维护成本。对于行业而言这篇论文也预示着RAG的发展方向未来的检索增强一定是“大模型推理主导、检索工具为辅”的Agentic RAG范式让大模型自主决定“找什么、去哪找、怎么找”而非被固定的检索算法束缚住手脚。学AI大模型的正确顺序千万不要搞错了2026年AI风口已来各行各业的AI渗透肉眼可见超多公司要么转型做AI相关产品要么高薪挖AI技术人才机遇直接摆在眼前有往AI方向发展或者本身有后端编程基础的朋友直接冲AI大模型应用开发转岗超合适就算暂时不打算转岗了解大模型、RAG、Prompt、Agent这些热门概念能上手做简单项目也绝对是求职加分王给大家整理了超全最新的AI大模型应用开发学习清单和资料手把手帮你快速入门学习路线:✅大模型基础认知—大模型核心原理、发展历程、主流模型GPT、文心一言等特点解析✅核心技术模块—RAG检索增强生成、Prompt工程实战、Agent智能体开发逻辑✅开发基础能力—Python进阶、API接口调用、大模型开发框架LangChain等实操✅应用场景开发—智能问答系统、企业知识库、AIGC内容生成工具、行业定制化大模型应用✅项目落地流程—需求拆解、技术选型、模型调优、测试上线、运维迭代✅面试求职冲刺—岗位JD解析、简历AI项目包装、高频面试题汇总、模拟面经以上6大模块看似清晰好上手实则每个部分都有扎实的核心内容需要吃透我把大模型的学习全流程已经整理好了抓住AI时代风口轻松解锁职业新可能希望大家都能把握机遇实现薪资/职业跃迁这份完整版的大模型 AI 学习资料已经上传CSDN朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】