首页 > 电脑教程 > 电脑教程 > 让RAG真正读懂“言外之意”!新框架引入词汇多样性,刷新多基准

让RAG真正读懂“言外之意”!新框架引入词汇多样性,刷新多基准

发布时间:2025-09-28 11:03:39来源: 18736036555

RAG准确率提升10.6%,多项基准拿下新SOTA!

ACL 2025最新研究提出Lexical Diversity-aware RAG(DRAG)框架,首次系统性地将词汇多样性引入RAG的检索与生成过程,提供了一个轻量、通用且易扩展的解决方案。

在多项基准任务中,该方法带来了显著性能提升,尤其在HotpotQA上刷新了当前最优结果。



在大语言模型的浪潮下,Retrieval-Augmented Generation(RAG)已经成为提升模型事实性和时效性的重要手段。然而,现有方法普遍忽视了一个看似细微却极为关键的问题——词汇多样性(lexical diversity)。

同一个问题,不同的表达方式,往往让检索模型“晕头转向”,最终导致错误答案。

由此,来自北航、北大、中关村实验室的研究团队提出了这项最新工作,他们首次将“词汇多样性”引入检索增强生成的相关性评估过程,并通过新颖的风险稀疏校准机制解决了生成阶段被无关信息干扰的问题。

团队认为,该方法对信息检索、问答系统、专业领域大模型应用都具有重要价值。未来,他们计划进一步拓展该方法到更多专业场景,让大模型不仅能“读懂”,更能“理解”复杂的人类语言表达。

词汇多样性:RAG的隐形痛点

研究团队指出,现有RAG方法大多通过“单一标准”判断检索文档是否相关,但现实情况要复杂得多。如图所示,以问题“What is Hattie McDaniel’s occupation?”为例,其中的语义成分表现出不同程度“词汇多样性”:

 

  • 不变词(Invariant):人名“Hattie McDaniel”一般不会变形;
  • 可变词(Variant):词语“occupation”可以对应“profession”“actress”甚至“Academy Award”;
  • 补充信息(Supplementary):答案可能依赖“American celebrity”等扩展语境。

 



这种词汇多样性往往导致模型错误地将部分相似但无关的文档判为相关,或者忽略了真正有用的信息。

两大关键创新

为解决“词汇多样性”带来的挑战,研究团队提出了该框架,核心在于两个互补模块:

1、Diversity-sensitive Relevance Analyzer(DRA)

传统检索相关性评估往往“一刀切”,把整体查询和检索文档进行比较。该方法则进一步拆解查询语义,针对不同成分采用差异化策略:

 

  • 不变成分:如人名、地名等必须精确匹配的关键词,该方法强调其检索文档应与该成分严格匹配;
  • 可变成分:如“occupation”—“profession”,DRA借助LLM的语义扩展和分析能力,在检索时允许一定语义灵活性;
  • 补充成分:如“American celebrity”,该方法通过检索需求的明确程度来判断是否需要真正提供有用的补充证据。

 

在此基础上,该方法通过该模块对相似度检索结果进行重排序,输出一个更细粒度、多维度的相关性评分,避免检索时存在的“假阳性”和“假阴性”的常见问题。

电脑教程更多>>

荣耀最强旗舰!荣耀Magic8 RSR保时捷设计明天首销:7999元起 荣耀MagicOS系统1月升级内容公布,含AI追色、带壳截屏等 iQOO15 Ultra双配色登场 以代号演绎未来科技 几场漂亮“大仗”背后,阿里已经重塑“组织优势” 分析清理微信储存空间的开源项目遭发函、下架?腾讯回应 存储涨价行情下如何省钱?新年高性价比DDR4主机配置推荐 华为手机迎来五则新消息:折叠屏、小屏、畅享、产能,均有新变化 这类ETF单周缩水超2000亿元,发生了什么?| ETF规模周报 京东健康发布AI产品“知医” 2.5K档最强!REDMI Turbo 5 Max跑分出炉:首发天玑9500s 联名泡泡玛特:荣耀500 Pro MOLLY 20周年限定版礼盒19日发布 开发周期紧张影响升级?消息称三星S26+屏幕尺寸与前代保持一致 快递驿站转让帖在线上涌现,经营者称每月只赚五六千,“不如去当保安” 小米澎湃OS3最后一批适配启动!你的手机能升吗?老用户必看 小米六款机型全面停更,你的手机会被波及吗,速速核对吧 荣耀Power2发布前瞻:外观、配置、续航、定价,基本没悬念了 真我手机更新到UI7.0?先看这3步,再决定要不要升级 苹果要出折叠屏了,这回真不是手机,是桌面? 全维赋能,智启征程!华为与中国互联网的2025精彩纷呈 VIVO迈出了第一步,抱住了一条大腿,身价直接上了一个档次! 余承东一锤定音,享界轿车改道旅行车成爆款 传长安汽车因2025年销量未达目标而取消员工年终奖引发不满!目标300万辆,完成291.3万辆,官方暂无回应 混动双雄终极对决:凯美瑞省油开10年,雅阁快得像电车? 5.59万配自动挡、倒车影像、无钥匙启动,起亚奕跑值得买吗? 车宽两米,续航超六百,别克这新车能行? 大众全新SUV亮相,省油还能装,这车能火? 1 月 8/10 日连发!比亚迪三款 DM-i 新车 210km 续航 + 云辇 - C 加持 奔驰“小g”官图疑似曝光 纯电动力 2027年首发亮相 全新一代宝马3系首次全面曝光,外观,内饰大升级,真漂亮 全新奔驰GLA曝光,21寸轮毂+贯穿尾灯,把轻奢智能SUV玩