等待提取完整事项
整理完整含义,保留分工、时间变化和条件,供检索时判断SAG
让 Agent 从多份资料中,找全回答所需的依据。
数据来自论文评测,测试集、指标和实验条件见下方说明。
01 / HOW IT WORKS
先提取事项与实体,再按关联检索
SAG 先让模型整理每段原文,分别提取事项和实体,再记录它们的关联。提问后,通过共同实体查找相关事项,最终回到原文。
原文 → 同时提取事项和实体 → 建立关联
事项和实体是从同一段原文提取的两类结果周五的评审会先回顾了 Aurora 企业版的开发进展。目前只完成内部试用,单点登录联调尚未结束,暂时不能对外发布。原定5月上线的安排因此需要调整。讨论后确定,正式发布改为6月,但必须先通过单点登录联调和安全验收。此次发布由林然负责,测试、验收和上线安排都由他协调。周宁继续负责性能测试,不承担发布决策。对外通知等验收通过后再发送。会上还提到,4月的演示版本仅供内部展示,不代表正式发布。
等待提取原文中的实体
从原文提取,作为索引,连接其他提到相同实体的事项事项 A ↔ Aurora 企业版、林然、周宁、4月、5月、6月、单点登录、安全验收
一个原文段落对应一个完整事项,同时关联从原文提取的多个实体先保留原文段落
原文包含项目进展、延期原因、两个人的分工和多个时间。保留这段原文及出处,后续回答可以回到这里核对。
示例内容为虚构,用于说明检索过程。点击步骤可逐步查看,自动播放一轮后停止。
02 / BENCHMARKS
资料找得更全,回答也更准确
Recall@5 看前五条结果找回了多少必要资料;F1 看最终回答与参考答案有多吻合。切换测试集,可以分别比较检索和回答的效果。
比 NV-Embed-v2 高 11.52 个百分点
三个测试集各 1,000 道开发集问题。作答模型统一为 Qwen3.6-Flash;使用结构化索引的方法统一采用 BGE-Large-EN-v1.5 检索模型。原论文没有报告 Recall 的方法,不在该指标图中展示。
完整评测数据Recall@5
| 方法 | MuSiQue | 2WikiMultiHopQA | HotpotQA |
|---|---|---|---|
| BM25 | 42.11 | 63.78 | 73.05 |
| Contriever | 45.32 | 59.25 | 74.85 |
| BGE-Large-EN-v1.5 | 56.32 | 69.83 | 89.20 |
| GTE-Qwen2-7B | 61.92 | 74.18 | 88.45 |
| GritLM-7B | 66.22 | 75.62 | 93.40 |
| NV-Embed-v2 | 68.84 | 77.00 | 95.25 |
| GraphRAG | — | — | — |
| LightRAG | — | — | — |
| HyperGraphRAG | — | — | — |
| HyperRAG | — | — | — |
| HippoRAG 2 | 65.13 | 90.35 | 94.35 |
| SAG | 80.36 | 93.34 | 96.50 |
03 / ABLATION STUDY
哪些设计让资料找得更全
在相同测试条件下,每次只改一个步骤,看看会少找回多少资料。这类逐项比较,论文里称为消融实验。
MuSiQue · Recall@5
继续查关联资料,减少信息遗漏
按同一个人或项目继续查找,能补充第一次没有找到的内容。开启这一步后,Recall@5 从 69.41% 提升至 80.36%。
把几份资料放在一起判断
几段资料可能各自只说明一部分事实。结合起来判断,比给每段内容单独打分,更容易选出支持完整答案的资料。
04 / ARCHITECTURE
保留完整事项,也保留资料之间的联系
01 / 数据结构
一段原文,记录两类信息
一个事项关联多个实体
事项保留完整含义,实体用于索引和扩展。两类信息都从同一段原文提取,再建立关联。
同一个人,可以关联多份资料
一个事项同时关联多个实体,技术上称为超边。检索时,通过共同的人名、项目名等找到其他事项,按当前问题继续查找。
在提问时查找关联,无需提前构建全局知识图谱新资料可以持续加入
新文档按段整理后,追加写入数据库。检索时结合直接检索与关联查找的结果,最终返回原文和来源。
新增资料按段处理,原文始终可以回溯05 / DEPLOYMENT
部署与使用
建库准备
用模型整理事项、提取实体,再生成向量。新资料处理后,可以继续追加到数据库。
适用场景
适合需要关联多份文档的知识库与 Agent。先查相关事项,再返回原文及出处。
使用限制
同一实体的不同叫法需要自行整理;过时事项也需要单独更新,当前版本不会自动处理。
- 01
整理个人资料
将资料加入本地知识库
- 02
搜索或提问
查找相关内容,也可供 Agent 调用
- 03
核对原文
从搜索结果和回答引用返回来源
