xiaowei
|
f1859f2ff9
|
perf(pagerank): O(V+E) 累加实现替代 O(V²) 全源遍历
旧实现每目标节点遍历全部源节点找边匹配 (943-961):
- 17628 nodes × 20 迭代 = 6.2亿次内层操作 → 单次 PageRank ~3 分钟
- 重启后多套触发器零值连锁 fire full consolidation → CPU 100% 持续 10+ 分钟
新实现先归一化每源节点总权重, 再沿出边把贡献累加到目标 (O(V+E)):
- 17628 nodes PageRank + 图谱维护: 3分钟 → <1 秒
- 重启风暴从 10+ 分钟 CPU 100% → 秒级无感
实测: 01:16:40 图谱维护开始 → 01:16:41 PageRank 更新 17628 nodes 完成
|
2026-09-06 01:20:21 +08:00 |
|
xiaowei
|
d4343b1c47
|
fix(recall): Embedder http client 8s 超时 + decay 分批 AC-1 日志
- Embedder http.Client{} 无超时 → 远端 bge 半开 TCP 时 recall 永久挂起
(gateway 10s 断 → 织忆异常误报)。加 8s 超时快速失败降级。
- decay 每 tick 限量 2000 条(最久未访问优先) + scanned/forgotten 日志
(AC-1 验收证据)
|
2026-09-06 01:08:42 +08:00 |
|
xiaowei
|
e6b1e0417c
|
fix(forgetting): P1 防风暴 - 限长/分桶/抽样下推/decay分批
febc2c9 全表扫描 O(n²) 风暴的根治防护(生产基线 ba44e20+ 之上,不含 febc2c9 扫描代码):
1. mergeSimilar 按 category 分桶 + 单桶 maxMergePerBucket=500 截断
- 原双层循环全量 O(n²),全表时触发 620% CPU
- 分桶后 O(Σ桶²) << O(n²),语义不变(原 catI!=catJ continue 等价分桶)
2. scanConflicts 显式 created_at 倒序取最近 500 条
- 原注释'最近100条'实际全量 O(n·50)
3. checkTimestampSanity 先截断 maxSanitySample=1000 再均匀抽样
- 原全量拉取仅为 5% 抽样
4. decay 每 tick 限量 maxDecayBatch=2000,按最久未访问优先
5. 存储层输出契约统一 RFC3339 string + 补 category/created_at
- lancedb_ipc: last_recalled_at 此前直接放 time.Time → server.go .(string)
断言恒失败 → lastAccessed 永远默认30天前 → 遗忘判定失真(本 bug + 数据
年龄未到 = 遗忘从不触发的双根因之一)
- sqlite: 补 category/created_at + LIMIT 100→200(对齐 lancedb 契约)
- 新增 memoryTimeVal/fmtTimeRFC3339 helper 兼容多类型
测试: go build ./... 全绿;gofmt 仅历史文件遗留(未全文件重排,保持最小 diff)
|
2026-09-06 00:56:06 +08:00 |
|
小唯
|
cdc6b4e9a2
|
fix(consolidate): 按目标分组批量LLM决策,消除O(n²)调用风暴
原实现每对高相似记忆调一次LLM → limit=100产生4950对 → 223s+未完成
→ 每天processed=0(非namespace过滤bug)。改为: 外层目标i,内层收集
全部高相似候选,每目标一次LLM(UpdatePrompt原生支持多候选)。
验证: limit=20 → 4.3s返回 processed=1 updated=1; limit=100 2min(受
llama单slot排队限制)对每日低频可用。
|
2026-09-06 00:32:27 +08:00 |
|
小唯
|
736d407e68
|
fix(softdelete): 单独应用 SoftDelete 持久化修复(ba44e20+SoftDelete only, 不含 lancedb_scan 风暴代码)
从 febc2c9 提取仅 SoftDelete 部分: updateField 提升包级 + SoftDelete 调
lancedb_update 持久化 is_deleted=true。跳过 GetCandidatesForForgetting 全表
扫描改动(有 620% CPU 风暴 bug, 待修复后另部署)。
验证: DELETE scratch2-1788616361067 → [ipc]SoftDelete persisted → 查询0条
→ 重启后仍0条(持久化成功)。
|
2026-09-06 00:23:23 +08:00 |
|
xiaowei
|
1416b4e41f
|
fix(consolidate): eps 1.0->0.4 修复 DBSCAN 聚类失效 (clusters=1->34)
根因: bge-m3 向量已归一化(norm=1.0, 距离 p50=0.42-0.75), 旧 eps=1.0 按未归一化数据(p50=1.029)调试,
在归一化空间过大 -> 全部连成1簇 -> consolidate 空转多日 (clusters=1 error 每15min刷)
实测: eps=0.4 -> clusters=34 noise=1030, 能发现重复状态噪音簇(1045条主profile状态同步/961条CBM状态)
|
2026-09-05 18:13:53 +08:00 |
|
xiaowei
|
fc8696c91e
|
fix(distill): commit 检出冲突时不进自动蒸馏(conflict guard)
问题:commit 的 DetectContradiction 检出矛盾后只返回 conflicts 字段,
内容仍进 episodes→自动蒸馏→污染 distilled/memories(TencentDB 误判案例根因链一环)
修复:conflicts>0 时跳过 AutoDistillTrigger,返回 distill_skipped=conflict;
处理路径:①写错→feedback not_useful;②旧记忆错→feedback 降权;
③确认为修正→resolve_conflict=true 重 commit(待客户端支持)
验证:commit 矛盾内容 → conflicts 返回 + distill_skipped=conflict ✅
|
2026-09-04 01:29:11 +08:00 |
|
xiaowei
|
2a350cf781
|
fix(distill): max_tokens 800→1200 — Agnes推理token预算不足
Agnes 2.0-flash是推理模型,推理token占大量预算。
800仍不够→JSON截断(parse error: unexpected end of JSON input)。
1200确保推理+正文都够用。
|
2026-08-20 01:13:06 +08:00 |
|