Skip to content

fix: 准则补「不以模型记忆核对现实对应关系」 - #158

Merged
guanlili merged 1 commit into
mainfrom
fix/knowledge-correspondence-guard
Oct 14, 2026
Merged

guanlili merged 1 commit into
mainfrom
fix/knowledge-correspondence-guard

Conversation

@guanlili

Copy link
Copy Markdown
Owner

Summary

用户实测:人名与职务对不上的内容被审校改"对"——模型凭记忆断言「现任 X 不是 Y」,从 logic 通道输出对应关系纠错。现有 7a「专有名词不改写」针对 typo 改写形态,logic 断言是覆盖盲区。

  • 准则 7 新增 g):人名与职务/机构/头衔对应、在任时间、机构隶属、地名归属等,现实知识可能过时或错误,除非文中另有明确矛盾证据一律不报,不得据此改动人名、职务或机构名。
  • 与既有条款的关系:7a 管改写形态、人物保护管性别、数字规则管数值常识,g) 管 logic 通道的现实对应断言。

实测与边界(如实)

  • 该误报随机且随模型不同(用户案例来自网关通道模型);dev/lite 上 A/B 对照(无规则 4 轮 vs 有规则 3 轮)均未复现,本条款为显式堵漏而非已验证的行为回归修复,效果以生产侧观察为准。
  • 新增 test_prompt_rules.py:条款存续回归(防编辑误删)+ 既有 7a/7f 条款保护。

Test plan

  • 单测 75 全过、Ruff 净
  • A/B 实测记录(见上)
  • CI 全绿后合并

用户实测(2026-10-14):人名与职务对不上的被改"对"——模型凭记忆
断言"现任X不是Y",从 logic 通道输出对应关系纠错,绕过 7a
(专有名词不改写针对的是 typo 改写形态,logic 断言未覆盖)。

准则 7 新增 g):人名与职务/机构/头衔对应、在任时间、机构隶属、
地名归属等,现实知识可能过时或错误,除非文中另有明确矛盾证据
一律不报,更不得据此改动人名、职务或机构名。

A/B 实测说明:该误报为随机且随模型不同(用户案例来自网关通道);
dev/lite 对照组(无规则 4 轮)与实验组(有规则 3 轮)均未复现,
本条款为显式堵漏而非行为回归修复,效果以生产侧观察为准。
@guanlili
guanlili merged commit 0c45131 into main Oct 14, 2026
3 checks passed
@guanlili
guanlili deleted the fix/knowledge-correspondence-guard branch October 14, 2026 11:24
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

1 participant