tzt/projectAIpopular
1
0
Fork 0
Code Issues Pull Requests Actions Packages Projects Releases Wiki Activity

feat(sense): T-G8 E-G1 shadow 报告（一致率/分布/覆盖率/晋升门）

Browse Source 
- scripts/sense_report.py：collect 数据 -> 夜间标签推导 -> 一致率/档位分布/
  T1 决策精度（conformal 覆盖）/T1 真值占比/混淆矩阵 -> CSV+Markdown
  报告入 research/v2_experiments/；晋升门四条自动判定
  （一致率>=85% + 覆盖>=1-α-2% + 标签>=min_labels + T1 占比 40-55%）
- 测试 +2（90% 一致率合成集走完整管道含混淆矩阵与晋升结论 /
  标签不足时正确拒绝 live），全量 412 passed
This commit is contained in:
tzt
2026-09-05 15:12:50 +08:00
parent a636b989e5
commit 6e5294353f
3 changed files with 212 additions and 1 deletions
Download Patch File Download Diff File Expand all files Collapse all files
任务拆解与执行计划.md
+1 -1
View File
@@ -163,4 +163,4 @@ P0 完成后的能力：干净的后端抽象 + 可量化的评测 + 可追溯
| T-G5 | Grader：决策组合（特征门×概率×conformal）+ /v1/route + 三态 mode | ✅ 完成 | T-G5 |
| T-G6 | live 分流：pipeline tier_fn 三档钩子 + proxy 档位映射 + T2 档升级阶梯 | ✅ 完成 | T-G6 |
| T-G7 | 审计+前端：ReviewQueue 抽样 + tier 指标卡 + 客户端来源显示/一键升级 | ✅ 完成 | T-G7 |
| T-G8 | 实验：E-G1/E-G3 报告；（可选）LoraRemote + E-G2 线性 vs LoRA | ⬜ 待办 | |
| T-G8 | 实验：E-G1/E-G3 报告；（可选）LoraRemote + E-G2 线性 vs LoRA | ✅ 完成 | T-G8 |