Loading...

🔄

反馈链接

实现迭代式改进循环,对输出进行评估并作为输入回馈,直至满足质量标准;已被证明能够通过基于收敛的精化提升输出质量,对创意类和优化类任务尤为有效

复杂度: medium提示链

In 30 seconds

What: 生成输出，按质量指标进行评估，把批评意见作为输入回灌，并不断重新生成，直到达到阈值或触及迭代上限。
When to use: 适合通过反复修订提升质量的任务，比如写作、代码生成，或者具备可衡量成功标准的优化问题。
Watch out: 很容易陷入无限循环或出现收益递减；请设置严格的迭代上限，并验证指标是否真的与实际质量相关。

Loading technique guide…

Patterns

Loading...

Loading Agentic Design…

Agentic Design面向生产环境 AI 智能体的模式与工具

专家支持价格

设计模式与技术

Loading...

🔄

反馈链接

复杂度: medium提示链

In 30 seconds

What: 生成输出，按质量指标进行评估，把批评意见作为输入回灌，并不断重新生成，直到达到阈值或触及迭代上限。
When to use: 适合通过反复修订提升质量的任务，比如写作、代码生成，或者具备可衡量成功标准的优化问题。
Watch out: 很容易陷入无限循环或出现收益递减；请设置严格的迭代上限，并验证指标是否真的与实际质量相关。

核心机制

反馈链执行一个迭代循环：生成 → 评估 → 改进，重复进行直至达到目标质量阈值或停止条件。评估器（规则、量表或 model-as-judge）产出具体反馈，驱动有针对性的修订，从而收敛到更高质量的输出。

🔄

流程

循环迭代

🧪

评估

量表与评分

🎯

收敛

达标即停止

🧭

控制

质量门禁

工作流 / 步骤

定义具有明确、可衡量阈值的质量标准与评估量表。
使用合适的提示与生成策略产出初始结果。
通过规则、量表或 model-as-judge 方式对照标准评估输出。
收集针对待改进之处的具体、可执行反馈。
依据反馈修订输出，针对已识别的弱点与缺口。
重复评估与修订循环，直到达到质量阈值或最大迭代次数。
以质量评分和迭代历史定稿输出，保证透明度。

Best Practices

尽量使用轻量评估器，把最强模型留给最终验收。

积极截断历史：传递提炼后的状态（事实、约束、最近的 diff），而非完整对话记录。

设置最大迭代次数并在增量很小时提前停止，避免无限循环并控制成本。

设计结构化反馈格式，引导有针对性的修订而非泛泛的批评。

引入置信度阈值，判断何时额外迭代已收益递减。

缓存评估结果并在相似任务间复用，以提升效率。

监控收敛模式，以优化评估标准与停止条件。

何时不宜使用

首次尝试通常即可满足质量要求的简单任务。
延迟约束严格、无法承受迭代周期的实时应用。
缺乏明确评估标准或可衡量质量阈值的任务。
资源受限、无法承担多轮生成的环境。
需要人工评估、自动反馈不足以胜任的场景。

常见陷阱

评估标准模糊或不一致，导致反馈质量低下。
停止条件校准不当或缺失时出现无限循环。
迭代成本过高，却没有相应的质量提升。
反馈过于笼统，无法指导有效修订。
过度依赖自动评估，最终输出缺少人工验证。
状态管理不佳，导致迭代之间丢失重要上下文。

Key Features

带质量收敛跟踪的生成、评估、改进迭代循环

灵活的评估策略：规则、量表或 model-as-judge 方式

带可执行改进指引的结构化反馈收集

可配置的停止条件，含最大迭代次数与收敛阈值

具备上下文保留与截断策略的历史管理

通过迭代跟踪与理由记录实现质量评分与透明度

KPI / 成功指标

每次迭代的质量增益：收敛前每次迭代的 Δ 分数。
收敛迭代次数：达到目标或停止所需的平均迭代次数。
评判一致性：评估者间一致性或评估器的自一致性。
目标达成率：达到目标阈值的运行占比。
每提升一分的成本：每 +1 分或每次验收所耗 token。
提前停止率：因增量过小或达到最大迭代上限而中止的运行。

Token / 资源用量

总成本 ≈ 各次迭代（生成 token + 评估 token + 修订 token）的 Σ。预期收益递减，应针对早期收敛优化。
尽量使用轻量评估器，把最强模型留给最终验收。
积极截断历史：传递提炼后的状态（事实、约束、最近的 diff），而非完整对话记录。
设置最大迭代次数并在增量很小时提前停止，防止成本爆炸。
缓存评估结果与反馈模式，减少冗余处理。
监控每质量分的成本，以优化迭代策略与停止阈值。

最佳应用场景

需要对质量与文风进行迭代打磨的内容创作。
包含编译、测试与改进循环的代码生成。
带同行评审模拟与修订流程的学术写作。
多种视角与反复打磨能带来价值的创意任务。
需要系统性改进直至满足标准的质量保证场景。
初次尝试需要调试与增强的复杂问题求解。

参考资料与延伸阅读

通过这些精选资源加深理解

学术论文

Self-Refine: Iterative Refinement with Self-Feedback (Madaan et al., 2023)

Constitutional AI: Harmlessness from AI Feedback (Bai et al., 2022)

Training Language Models to Follow Instructions with Human Feedback (Ouyang et al., 2022)

实现指南

LangChain Self-Critique and Refinement Chains

OpenAI Iterative Prompting Best Practices

Anthropic Constitutional AI Implementation

工具与库

LangChain 的反馈与批评链实现

用于结构化评估的 OpenAI function calling

自定义评估框架与量表体系

社区与讨论

LangChain Community：反馈循环模式

r/MachineLearning：自我精炼相关讨论

OpenAI Community：迭代改进策略

Loading technique guide…

Patterns

设计模式与技术

Loading...

核心机制

🔄

流程

循环迭代

🧪

评估

量表与评分

🎯

收敛

达标即停止

🧭

控制

质量门禁

工作流 / 步骤

定义具有明确、可衡量阈值的质量标准与评估量表。
使用合适的提示与生成策略产出初始结果。
通过规则、量表或 model-as-judge 方式对照标准评估输出。
收集针对待改进之处的具体、可执行反馈。
依据反馈修订输出，针对已识别的弱点与缺口。
重复评估与修订循环，直到达到质量阈值或最大迭代次数。
以质量评分和迭代历史定稿输出，保证透明度。

Best Practices

尽量使用轻量评估器，把最强模型留给最终验收。

积极截断历史：传递提炼后的状态（事实、约束、最近的 diff），而非完整对话记录。

设置最大迭代次数并在增量很小时提前停止，避免无限循环并控制成本。

设计结构化反馈格式，引导有针对性的修订而非泛泛的批评。

引入置信度阈值，判断何时额外迭代已收益递减。

缓存评估结果并在相似任务间复用，以提升效率。

监控收敛模式，以优化评估标准与停止条件。

何时不宜使用

首次尝试通常即可满足质量要求的简单任务。
延迟约束严格、无法承受迭代周期的实时应用。
缺乏明确评估标准或可衡量质量阈值的任务。
资源受限、无法承担多轮生成的环境。
需要人工评估、自动反馈不足以胜任的场景。

常见陷阱

评估标准模糊或不一致，导致反馈质量低下。
停止条件校准不当或缺失时出现无限循环。
迭代成本过高，却没有相应的质量提升。
反馈过于笼统，无法指导有效修订。
过度依赖自动评估，最终输出缺少人工验证。
状态管理不佳，导致迭代之间丢失重要上下文。

Key Features

带质量收敛跟踪的生成、评估、改进迭代循环

灵活的评估策略：规则、量表或 model-as-judge 方式

带可执行改进指引的结构化反馈收集

可配置的停止条件，含最大迭代次数与收敛阈值

具备上下文保留与截断策略的历史管理

通过迭代跟踪与理由记录实现质量评分与透明度

KPI / 成功指标

每次迭代的质量增益：收敛前每次迭代的 Δ 分数。
收敛迭代次数：达到目标或停止所需的平均迭代次数。
评判一致性：评估者间一致性或评估器的自一致性。
目标达成率：达到目标阈值的运行占比。
每提升一分的成本：每 +1 分或每次验收所耗 token。
提前停止率：因增量过小或达到最大迭代上限而中止的运行。

Token / 资源用量

总成本 ≈ 各次迭代（生成 token + 评估 token + 修订 token）的 Σ。预期收益递减，应针对早期收敛优化。
尽量使用轻量评估器，把最强模型留给最终验收。
积极截断历史：传递提炼后的状态（事实、约束、最近的 diff），而非完整对话记录。
设置最大迭代次数并在增量很小时提前停止，防止成本爆炸。
缓存评估结果与反馈模式，减少冗余处理。
监控每质量分的成本，以优化迭代策略与停止阈值。

最佳应用场景

需要对质量与文风进行迭代打磨的内容创作。
包含编译、测试与改进循环的代码生成。
带同行评审模拟与修订流程的学术写作。
多种视角与反复打磨能带来价值的创意任务。
需要系统性改进直至满足标准的质量保证场景。
初次尝试需要调试与增强的复杂问题求解。

参考资料与延伸阅读

通过这些精选资源加深理解

学术论文

Self-Refine: Iterative Refinement with Self-Feedback (Madaan et al., 2023)

Constitutional AI: Harmlessness from AI Feedback (Bai et al., 2022)

Training Language Models to Follow Instructions with Human Feedback (Ouyang et al., 2022)

实现指南

LangChain Self-Critique and Refinement Chains

OpenAI Iterative Prompting Best Practices

Anthropic Constitutional AI Implementation

工具与库

LangChain 的反馈与批评链实现

用于结构化评估的 OpenAI function calling

自定义评估框架与量表体系

社区与讨论

LangChain Community：反馈循环模式

r/MachineLearning：自我精炼相关讨论

OpenAI Community：迭代改进策略

反馈链接 - Agentic Design