fix: audit 剔除必须在截断之前(t_audit_overfetch)
病根:管道内 results[:topK] 先截断,API 层事后剔除 audit ⇒ k=2 时两条 audit 条目(v2/v3 的讨论残影,0.995/0.355)占满槽位 ⇒ 剔完剩 0 条 ⇒ bench 判零候选 ⇒ pred=None ⇒ 退出记分 ⇒「25/25 满分」是分母洞 修法 A(局部可逆):fetchLimit *= 2,当 audit 剔除开启时 - 读者数已核:全仓只有 core.go:985-989 一处剔除逻辑 - 2x 依据是「起点+可见性」,不是分布;剔除数日志是方案的另一半 - 回滚:ZHIYI_RECALL_EXCLUDE_AUDIT=0 验证: - k=2 v2/v3 从 0 → 2 条 ✓ - 分母从 25 恢复 27 ✓ - 两趟 --no-cache: 25/27(fp1,fn1) / 26/27(fp0,fn1),p50 208/207ms - v3 稳定 fn p=0.43(判官语义等价偏差,真实存在) - a6 是唯一不稳定题(fp ↔ 正确),已知边界住户 预注册偏离(记录不处理):预测掉到 23,实际 25-26。 原因:v2 靠污染剔除转正,不是判官变聪明。 架构手术 B(剔除下沉管道、检索层分流)排队下午治理「分级」那一问。
This commit is contained in:
@@ -650,6 +650,25 @@ func (a *API) Recall(w http.ResponseWriter, r *http.Request) {
|
||||
fetchLimit = maxContinuationOffset + req.Limit
|
||||
}
|
||||
|
||||
// ── t_audit_overfetch (2026-11-23 05:4x):audit 剔除必须跑在截断之前 ──
|
||||
//
|
||||
// 病根(实测 2026-11-23 凌晨):管道内 results[:topK] 先截断,回到 API 层才剔除
|
||||
// audit ⇒ k=2 时两条 audit 条目(v2/v3 的「讨论」残影,score 0.995/0.355)占满
|
||||
// 两个槽位,剔完剩 0 条 ⇒ v2/v3 判「零候选」退出记分 ⇒ 「25/25 满分」是分母洞。
|
||||
//
|
||||
// 修法 A(局部、可逆):多取一倍,给剔除留冗余。读者数已核:全仓只有
|
||||
// core.go:985-989 一处剔除逻辑,三行改动不构成「补丁落单路」。
|
||||
// 修法 B(剔除下沉管道、检索层分流)是架构手术,牵出域隔离层次/保底份额
|
||||
// 与业务剔除共存/C2 对 audit 条目的处理三个设计问题 ⇒ 归下午治理「分级」那一问。
|
||||
//
|
||||
// 2× 的依据:不是分布读出来的,是「起点 + 可见性」——让失败需要单查询过半
|
||||
// 被 audit 占据才发生,而剔除数日志(下一块 dropped > 0 那行)保证挤占一旦
|
||||
// 接近这个量级就现形。计数器是方案的另一半,不是附件。
|
||||
// 回滚:ZHIYI_RECALL_EXCLUDE_AUDIT=0(此系数随之失效)。
|
||||
if os.Getenv("ZHIYI_RECALL_EXCLUDE_AUDIT") != "0" && req.Namespace != "audit" {
|
||||
fetchLimit *= 2
|
||||
}
|
||||
|
||||
ctx := r.Context()
|
||||
if req.DeadlineMS > 0 {
|
||||
var cancel context.CancelFunc
|
||||
|
||||
Reference in New Issue
Block a user