docs(rectification): record v3 sealed holdout as evaluated not missing
Co-authored-by: Cursor <cursoragent@cursor.com>
This commit is contained in:
@@ -1023,3 +1023,10 @@
|
||||
- main/staging 同步后,migration run 30324787560 成功:应用 `20260727000000_admin_viewer_identity.sql` 与 `20260727010000_refine_admin_redemption_audit.sql`,并自动 dispatch deploy run 30324940917;该 deploy 成功,health exact SHA 为 `f950bfd...`。
|
||||
- 线上 `/admin` 冒烟发现反向代理 Location 错用容器 URL `https://0.0.0.0:3000/admin/codes`;改为相对 `/admin/codes`,形成最终 SHA `5206fb2323c87c877e5d361dc64c77d0497e14dd`,同步 fast-forward 到 main/staging。
|
||||
- 最终 SHA gate run 30325219367 success,自动 deploy run 30325788303 success;health 返回同一 SHA,`/admin` 307 到相对 `/admin/codes`,Refine shell 200,5 个匿名资源与匿名写请求均 401。未触发 production deploy。
|
||||
|
||||
## 2026-08-29 - C1: 密封 holdout 合同回写 v3 已评估结果,不是缺案例
|
||||
|
||||
- `references/rectification_sealed_holdout.v1.json` 此前仍是 v2 Obama 单例试点:`valid_public_aa_cases=1` / `required_cases=20` / `top_1_rate=0`。该 1/20 从未在 v3 的 20 例盲测回放后被覆盖,会让读者误以为“还缺案例”。
|
||||
- 真实状态来自 `minute_rectification_holdout_v3.json` 与 `minute_rectification_holdout_v3_report.json`(evaluated_on 2026-07-21):20 个公开 AA 案例已存在;source audit 失败(`invalidated_after_replay`);`top_1_rate=0.15`、`top_3_rate=0.25`、`mean_absolute_minute_error=6.95` 均未过门;`confirmation_coverage_rate=0.0`。
|
||||
- 合同六键已改为 v3 数字,`status` 仍为 `not_ready`。确认门保持关闭:案例数已满,但 status 非 ready 且 confirmation_coverage_rate 为 0。
|
||||
- 防复发:holdout 集一旦回放,必须把真实 status / 案例数 / 指标写回 `rectification_sealed_holdout.v1.json`;不得把合同留在上一版的计数上。
|
||||
|
||||
Reference in New Issue
Block a user