生成质量差怎么调优?
RAG 系统中生成模块的调优策略,涵盖 Prompt 与模型微调
原题：假设在一个检索-生成系统中，检索模块已准确返回相关文档或知识片段，但生成模块输出的内容质量较差（如不连贯、偏离主题、信息遗漏等），应从哪些方面进行调优？请列举具体策略和技术手段。
模型微调
30 秒回答
- 区分检索问题与生成问题，确认根因在生成侧
- Prompt工程优化（指令明确化、Few-shot示例、角色设定）
- 上下文处理策略（重排序、压缩、截断优化）
- 模型层面的SFT/RLHF微调
回答与解析
答案要点
- 区分检索问题与生成问题，确认根因在生成侧
- Prompt工程优化（指令明确化、Few-shot示例、角色设定）
- 上下文处理策略（重排序、压缩、截断优化）
- 模型层面的SFT/RLHF微调
- 生成控制参数与后处理校验机制
问题定位
首先确认是纯生成问题（检索结果已准确），而非检索-生成不匹配。常见症状：内容拼凑感强、逻辑断裂、答非所问。
核心优化策略
1. Prompt工程（零成本首选）
- 指令结构化：明确输出格式（"请分三点回答"）、约束条件（"仅基于提供的文档"）
- Few-shot示例：在Prompt中嵌入2-3个高质量输入-输出样例
- 角色设定：赋予模型特定身份（"你是严谨的医学助手"）提升一致性
2. 上下文处理优化
| 问题 | 技术手段 |
|---|---|
| 文档过长/噪声多 | 重排序（Rerank）：用Cross-Encoder对检索结果二次排序 |
| 上下文窗口溢出 | 语义压缩：用LLM提取关键句，或滑动窗口分段处理 |
| 多文档冲突 | 冲突检测+源标注：要求模型标注引用来源，显式处理矛盾 |
3. 模型微调（成本较高但效果显著）
- SFT：用领域高质量QA对微调，强化"基于文档回答"的指令遵循能力
- RLHF/DPO：针对连贯性、忠实度训练奖励模型，减少幻觉
4. 生成控制与后处理
- 解码参数：降低
temperature（0.1-0.3）、调整top_p提升确定性 - 结构化生成：强制JSON/特定格式输出，约束模型行为
- 后处理校验：用规则或小型模型检测答案是否覆盖文档关键点
快速验证思路
按成本从低到高尝试：Prompt调优 → 上下文压缩 → 轻量SFT（LoRA） → 全链路评估迭代
口语版讲法(约4分钟)
- 定位生成问题，区分检索
- Prompt工程零成本尝试
- 上下文压缩与重排序
- 模型微调和后处理兜底
- 按成本迭代，留可延伸点讲Self-RAG
这道题问的是检索已经做对了，但生成还是烂怎么办。本质上是在考你对生成问题的诊断和系统化修复能力，不是让你背Prompt模板。很多团队一碰到输出质量差就跑去调检索，其实检索已经准了，那就得把注意力完全转到生成侧。
先说怎么定位。如果检索回来的文档明明对，但模型答得像在拼凑、逻辑断掉甚至自己瞎编，那基本就是纯生成问题。我会先排除一个常见坑：是不是上下文太长把关键信息淹没了？或者多篇文档互相矛盾？这些是上下文层面的问题，不是模型能力不够。
接下来调优，我习惯按成本从低到高走。第一步肯定是Prompt工程，零成本嘛。但不是说加一句'请基于文档回答'就完事。我通常会做三件事：一是把指令结构化，比如明确说'请分三点，每点引用原文'；二是给两三个Few-shot示例，让模型看到输入输出长什么样；三是加角色设定，比如'你是严谨的客服助手'，这对风格一致性帮助很大。不过Prompt有天花板，遇到复杂逻辑或长文本，它就不够用了。
第二步是上下文处理。这里有个关键点：检索回来的文档不是越多越好。文档一多，噪声就多，模型容易跑偏。我会先用 重排 模型把最相关的几篇提到前面，后面的直接截掉。如果单篇文档太长，我会用语义压缩，让大模型自己把关键句抽出来，或者用滑动窗口分段处理。多文档冲突也是个常见坑，比如一篇说退款3天到账，另一篇说5天，模型可能各取一半。我的做法是要求模型标注引用来源，比如'根据文档A，退款3天'，这样冲突就能显式暴露出来。
第三步，如果Prompt和上下文都调了还是不行，那就得上模型微调。成本高，但效果直接。我会用LoRA做轻量SFT，拿一批高质量QA对，专门训练模型'基于文档回答'这个能力。如果预算够，还可以上 RLHF 或 DPO，针对连贯性和忠实度训练奖励模型，减少幻觉。不过微调有个前提：你的数据质量要够好，如果数据里本身有错误，模型会学歪。
最后是生成控制和后处理兜底。解码参数上，我会把temperature降到0.1到0.3，让输出更确定。后处理可以用规则或小模型检查答案是否覆盖了文档里的关键点，漏了就重试或提示。
其实还有一个方向值得关注，就是让模型自己反思生成质量，比如 Self-RAG 的思路。它不是在生成后校验，而是在生成过程中就判断要不要检索、要不要引用，动态调整。我觉得这可能是下一代RAG的方向，比静态调参更灵活。
所以整体上，我会把这个问题看成一条迭代链路：先诊断根因，再按成本从低到高尝试，每一步都要有评估指标，比如忠实度、连贯性。我更倾向于先用Prompt和上下文处理解决80%的问题，剩下20%再考虑微调。毕竟微调一次成本不低，而且维护起来也麻烦。
关键一句:Self-RAG让模型在生成过程中自我反思，动态决定是否检索和引用
面试官还可能这样问
- 问法 1 · 场景切入
假设你在做一个智能客服，检索模块已经搜到了最相关的知识片段，但生成的回答老是东拼西凑、逻辑不通，用户反馈说读不懂。你觉得问题可能出在哪儿？从哪些方面动手调优？
- 问法 2 · 层层追问
你的RAG系统生成质量不行，一般先看检索还是生成？……如果确定检索结果没问题，生成侧你会怎么优化？……具体到Prompt、上下文处理、模型微调这些方向，你分别有什么策略？
- 问法 3 · 直球架构
在一个检索-生成系统中，检索已精准返回相关文档，但生成输出质量差，比如不连贯、偏离主题、信息遗漏。请列出所有你能想到的调优方案，包括Prompt、上下文、微调、后处理等，并简要说明怎么落地。