- 文档首页
大模型应用防火墙
用户指南
防护
配置大模型防护策略
配置幻觉内容防护策略
配置幻觉内容防护策略
幻觉检测用于识别大模型回答中与事实、上下文或引用资料不一致的内容,帮助企业在知识问答、智能客服、业务助手等场景中及时发现错误回答,降低误导用户、输出虚假信息和业务决策偏差的风险。
当企业已经为大模型接入知识库、业务资料或标准答案时,仅依赖模型生成并不一定足够安全。通过在大模型应用防火墙中配置幻觉检测规则,您可以把高风险回答及时记录、审计,或在必要时直接拦截,从而让模型输出更可信、更可控。
在 RAG(检索增强生成)场景中,幻觉检测的重点,是判断模型回答是否忠于参考资料,而不是只看回答本身是否流畅。
也就是说,系统会综合对比:
如果模型回答与提供的参考内容明显不一致,就可能被识别为一致性幻觉。
当前仅 SDK 方式接入的资产支持一致性幻觉检测,相关 SDK 示例详见幻觉内容检测。 使用本功能时,请重点关注以下限制:
- 检测结果依赖输入质量,如果参考资料(召回内容)本身不完整、无关或噪声较多,可能影响检测效果。
- 启用策略。开启此开关以激活幻觉内容防护功能,否则后续添加的规则将不会生效。
-
最近更新时间:2026.09.09 21:10:03