Loading...
📜
宪章分类器(CC)
轻量级的输入和输出分类器,在由一部自然语言宪章生成的合成数据上训练,该宪章定义了允许和屏蔽的内容。它们以级联方式部署,廉价的筛查覆盖所有流量,可疑情形则升级处理;输出分类器能够在违规token出现的瞬间中止流式生成。这与 Constitutional AI 不同:Constitutional AI 在训练阶段对齐模型,而宪章分类器是从宪章训练而来、在运行时起作用的防护。
复杂度: medium安全与隐私模式
In 30 seconds
- What
- 用自然语言宪章生成的合成数据训练轻量分类器,在推理前筛查输入,并在出现第一个违规 token 时立即中止输出。
- When to use
- 适用于需要运行时内容过滤的大流量系统,前提是宪章规则清晰,且攻击模式可以合成出来用于训练。
- Watch out
- 基于合成数据训练的分类器,可能会漏掉宪章生成示例中未涵盖的新型混淆手法或对抗性措辞。
Loading technique guide…