discipline/protocols/calibration-maintenance.md
协议 · 校准维护(RQ-C2)
状态:生效(Round 3,实证待 DSF-Bench v0.2)· 依据:支柱 4(L-P-06/07/08)
问题
需求分布漂移(能力跃迁、价格剧变、政策变化)会让预测区间系统性失准; 校准不是一次性的,而是需要监控 → 触发 → 重校准 → 记录的循环。
监控指标
- PIT 直方图(偏离均匀 = 校准退化)。
- 可靠性图(预测概率 vs 观测频率)。
- 滚动覆盖率(如 80% 区间的实际覆盖率滑动窗口)。
- 分位评分滑动均值(pinball / CRPS 的漂移)。
漂移检测
- 分布漂移:PSI / KL 散度(特征分布对比)。
- 结构变化:CUSUM、贝叶斯变点(BOCPD)。
- 预测误差滚动统计:误差均值/方差漂移报警。
Conformal 工程化清单
- 选型:split(静态校准集)vs adaptive(滑动窗口,Gibbs & Candès 2021)vs 时序版 (Xu & Xie 2021 / Stankeviciute 2021)。
- 校准窗口:按波动频率设定(慢变=长窗;能力跃迁=短窗)。
- 覆盖目标:与决策场景一致(分布交付规范的 SLA 反推)。
- 重校准触发:覆盖率跌破阈值或漂移检测报警。
- 记录:每次重校准写入轮次记录(窗口、触发原因、前后覆盖率)。
维护循环
监控(PIT/覆盖率/误差)→ 触发(阈值/漂移报警)
→ 重校准(换窗口/换方法/重训练)→ 验证(覆盖率恢复)
→ 记录(rounds/)
边界
- Conformal 给出的是覆盖保证,不是校准保证;两者要分开评估。
- 极端分布漂移下先回退到判断/场景规划(支柱 5),不硬撑统计模型。